第5讲Spark_88703337探析.ppt

大数据分析与内存计算 第五讲 Spark ;Spark动机;Spark优点;SPARK vs hadoop;Spark优点;Spark快的理由;从实例开始， 漫游Spark内核;Spark和MapReduce比较;Spark生态圈;Spark框架;Spark框架优势;目录结构;目录结构;资源管理与作业调度;Spark启动模式;Yarn;Yarn - 一种分层的集群框架方法;Yarn;Yarn;Mesos;Mesos;Mesos;Mesos vs Yarn;Mesos vs Yarn;Spark主要内容;Scala;Scala;Scala def函数;Quick Tour;Scala;Scala;Scala;Quick Tour;Processing collections with functional programming: val list = List(1, 2, 3) list.foreach(x = println(x)) // prints 1, 2, 3list.foreach(println) // same list.map(x = x + 2) // = List(3, 4, 5)list.map(_ + 2) // same, with placeholder notation list.filter(x = x %