《Spark大数据技术与应用案例教程》 项目四： Spark Streaming——实时计算框架.pptx

Spark大数据技术与应用案例教程主讲教师：

目录项目一Spark入门项目二SparkRDD——弹性分布式数据集项目三SparkSQL——结构化数据处理项目四SparkStreaming——实时计算框架

目录项目五SparkMLlib——机器学习库项目六GraphFrames——图计算框架项目七综合案例——分析银行个人信贷 业务数据

项目四SparkStreaming——实时计算框架

第5页近年来，随着电子商务、日志分析、金融交易监控、网络安全监控等领域的发展，对数据实时处理的要求也逐渐提高。SparkStreaming计算框架就是为实现流数据的实时计算而产生的。

第6页本项目结合实时计算电影热度实例，首先介绍SparkStreaming的基本概念、运行原理及编写应用程序的基本步骤，然后详细介绍SparkStreaming读取数据源创建DStream的方法，接着介绍DStream的转换操作，最后介绍DStream的输出操作。

第7页了解流数据、流计算和SparkStreaming的基本概念。理解SparkStreaming的运行原理。掌握编写SparkStreaming应用程序的基本步骤。熟悉SparkStreaming的不同数据源。

第8页能使用SparkS