《大数据平台部署与应用》 项目实施课件 任务9.2 使用Spark实现水稻信息数据分析.pptx

使用Spark实现水稻信息数据分析;任务描述

部署好完全分布式Spark集群后，便可以通过Scala语言在Spark中实现水稻信息数据分析了。在本任务中，小数将读取水稻信息数据并对其进行简单分析，以测试Spark集群的部分功能。

任务环境

已部署Hadoop集群和Spark集群的3台CentOS7操作系统的虚拟机。;目录;水稻是全球最重要的粮食作物之一，水稻审定数据可以为农业科技创新提供重要的参考和依据，可以帮助选择高产、优质、抗逆性强的水稻品种，促进绿色、可持续的农业生产方式，有助于推动农业的可持续发展。

对水稻审定信息进行数据处理是对其进行分析之前的不可或缺的步骤。;本任务采用的数据是经