Spark应用开发技术曾凡晋24课件讲解.pptxVIP

Spark应用开发技术主讲人：曾凡晋

任务1.1初识Spark1.1.1认识Spark

学习目标：认识Spark01素养目标：了解Spark的发展历史02学习重点：理解Spark的特点03学习难点：掌握Spark生态圈和应用场景04学习目标及重难点

任务概述一认识Spark二目录

任务概述一

一、任务概述什么是SparkSpark发展历史及特点Spark应用场景

认识Spark二

二、认识SparkSpark是一种快速、分布式、可扩展、容错的集群计算框架。Spark是基于内存计算的大数据计算框架。Spark继承了MapReduce分布式计算的优点并改进了MapReduce分布式计算框架在计算时延迟过高，无法满足实时、快速计算的需求的明显缺陷。Spark是基于内存计算的大数据计算框架。（一）什么是Spark

二、认识Spark200920102011201220132014201520162017开源2月：Apache顶级项目2月：Cloudera加大了Spark框架投入增加了DataFramesAPI和DatasetAPISpark的重点开发方向是深度学习及对流性能的改进Spark诞生于AMPlabApache孵化器项目5月：PivotalHadoop集成Spark全栈30日Spark1.0.0发布Spark2.0发布200920142016（二）Spark发展