spark-07 sql案例详解课件与代码新特性介绍.pptxVIP

Spark2.x新特性介绍学大数据，上小牛学堂：

目录课程简介Spark2.x新特性介绍Spark2.x简单案例学大数据，上小牛学堂：

Spark2.xreleasenotes学大数据，上小牛学堂：

Spark2.x新特性学大数据，上小牛学堂：更简单：支持标准SQL和简化的API更快：Spark作为一个编译器更智能：Dataset结构化数据流

更简单：标准SQL和简化的API学大数据，上小牛学堂：Spark2.0依然拥有标准的SQL支持和统一的DataFrame/DatasetAPI。但我们扩展了Spark的SQL性能，引进了一个新的ANSISQL解析器并支持子查询。Spark2.0可以运行所有的99TPC-DS的查询，这需要很多的SQL：2003功能。在编程API方面，我们已经简化了API：统一Scala/Java下的DataFrames和DatasetsSparkSession更简单、更高性能的AccumulatorAPI基于DataFrame的MachineLearningAPI将成为主要的MLAPIMachineLearning管道持久性R中的分布式算法

更快：Spark作为一个编译器学大数据，上小牛学堂：Spark2.0将拥有更快的速度，下图是Spark2.0和Spark1.6的速度对比图

DataSet学大数据，上小牛学堂：

学大数据，上小牛学堂：

学大数据，上小牛学堂：

更智能：结构化数据流学大数据，上小牛学堂：通过在DataFrames之上构建持久化的应用程序来不断简化数据流，允许我们统一数据流，支持交互和批量查询。

学大数据，上小牛学堂：

传统迭代模型学大数据，上小牛学堂：

学大数据，上小牛学堂：

学大数据，上小牛学堂：

学大数据，上小牛学堂：