Spark大数据技术与应用（第3版）（微课版）课件 项目3、4 查询和统计员工薪资数据 Spark Shell编程、统计分析竞赛网站用户访问日志数据 Spark IDE编程.pptx

查询和统计员工薪资数据

——SparkShell编程;项目背景;项目背景;创建SparkRDD;创建SparkRDD;从内存中已有数据创建RDD;parallelize()方法;makeRDD()方法;makeRDD()方法;从外部存储系统读取数据创建RDD;创建SparkRDD;map()方法;sortBy()方法;collect()方法;collect()方法;flatMap()方法;take()方法;filter()方法;distinct()方法;使用简单的集合操作;union()方法;intersection()方法;subtract()方法;cartesian()方法;创建S