Spark的安装与配置.pptx

第三章Spark安装与配置

学习目标Spark的定义Spark与Hadoop的区别Spark核心模块及运行架构132知识思政技能Spark安装与配置吃苦耐劳科学探索精神

技术前提Centos7.0Hadoop生态圈

Spark定义Spark是一种基于内存的快速、通用、可扩展的大数据分析计算引擎。Spark的设计旨在提高大数据处理的效率，它通过在内存中存储和处理数据，减少了磁盘IO和数据落地操作，从而提高了计算速度。对于数据源而言，Spark支持从HDFS、HBase、Hive及Kafka等多种途径获取，数据。

Spark与Hadoop区别Hadoop的MR框架和Spark