大数据技术原理与应用-厦门大学数据库试验室.ppt

1.6.3 Flink Flink生态系统 1.6.3 Flink Flink与Spark的比较 1.6.3 Flink Spark和Flink全部都运行在Hadoop YARN上，性能为Flink Spark Hadoop(MR)，迭代次数越多越明显，性能上，Flink优于Spark和Hadoop最主要的原因是Flink支持增量迭代，具有对迭代自动优化的功能。 性能对比 首先它们都可以基于内存计算框架进行实时计算，所以都拥有非常好的计算性能。经过测试，Flink计算性能上略好。 1.6.3 Flink 流式计算比较 它们都支持流式计算，Flink是一行一行处理，而Spark是基于数据片集合（RDD）进行小批量处理，所以Spark在流式处理方面，不可避免增加一些延时。Flink的流式计算跟Storm性能差不多，支持毫秒级计算，而Spark则只能支持秒级计算。 SQL支持 都支持SQL，Spark对SQL的支持比Flink支持的范围要大一些，另外Spark支持对SQL的优化，而Flink支持主要是对API级的优化。 既生瑜，何生亮！ 1.6.4 Beam 谷歌，Beam，一统天下？ 1.6.4 Beam 附录：主讲教师林子雨简介 单位：厦门大学计算机科学系 E-mail: ziyulin@ 个人网页：/linziyu 数据库实验室网站： 主讲教师：林子雨 林子雨，男，1978年出