大数据分析技术应用-Spark简介.pptx

Spark简介

学习目标什么是SparkSpark发展历史Spark核心模块132知识思政技能Spark与Hadoop区别吃苦耐劳科学探索精神

技术前提Centos7.0Hadoop生态圈

什么是Spark？Spark它是一个用于大规模数据处理的实时计算引擎。Spark是基于内存计算的大数据并行计算框架，可用于构架大型的、低延迟的数据分析应用程序。Spark是大数据的调度，监控和分配引擎。它是一个快速通用的集群计算平台。Spark扩展了流行的MapReduce模型。Spark提供的主要功能之一就是能够在内存中运行计算。但对于在磁盘上运行的复杂应用程序，系统也比MapReduce更有效