2021年基于Spark构建开放式的云计算平台第一阶段课程.docxVIP

PAGE PAGE 1 在2014年6月30日到7月2日举行的Spark Summit是整个云计算大数据领域的Big Event，在会议上DataBricks公司提出了构建开放的Cloud平台，而且宣布该平台完全基于Spark，该平台功能类似于EC2，但比EC2更快、更灵活、更易用。 构建一个开发的云服务平台，需要存储技术、计算平台、消息驱动框架和开发API架构设计等，所以我们把课程主要分为两个阶段：1，Spark技术实战；2，构建开发云平他的消息驱动框架和开放API设计实现； 本课程是是整个系列课程的第一阶段课程，采用当今世界公认的最好的大数据技术Spark来打造开放云平台的计算框架。 授课的案例部分 主要采用Sogou和纽约时报的数据进行演示和说明； 在讲授各个知识点的时候亦分别数据支撑的案例演示； 课程介绍 课程包含Spark的架构设计、Spark编程模型、Spark内核框架源码剖析、Spark的广播变量与累加器、Shark的原理和使用、Spark的机器学习、Spark的图计算GraphX、Spark SQL、Spark实时流处理、Spark的优化、Spark on Yarn、JobServer等Spark 1.0.0所有的核心内容 最后以一个商业级别的Spark案例为基础，实战展示商业级别Spark项目的架构设计、实现和优化； 培训对象 云计算大数据从业者； H