基于Hadoop的云环境下作物生长模型算法的实现与测试.pdfVIP

第29 卷 第8 期 农 业 工 程 学 报 Vol.29 No.8 2013 年 4 月 Transactions of the Chinese Society of Agricultural Engineering Apr. 2013 179 基于Hadoop 的云环境下作物生长模型算法的实现与测试 1 1 1 2 1,2※ 赵青松 ，陈 林 ，孙 波 ，朱 艳 ，姜海燕 （1. 南京农业大学信息科技学院，南京 210095 ； 2. 南京农业大学/ 国家信息农业工程技术中心，南京 210095 ） 摘 要：为了提高作物生长模型的计算速度，该文提出了云环境下作物生长模型算法的实现方案。综合分析了作 物生长模型和子模型之间的数据依赖关系，以及不同并行计算方法的特点。以云计算基础架构开源软件 Hadoop 为基础，设计云环境下作物生长模型处理方案。以小麦生长模型WheatGrow 为测试对象，在真实云环境下，验证 了该方案的有效性。研究表明，在处理作物生长模型这类具有复杂数据依赖关系问题时，当区域数据点较多，需 采用数据并行计算方法；且区域数据点越多，加入计算的计算结点越多，越能体现出MapReduce 在并行计算上具 有的可扩展性。研究可为促进作物生长模型和数字农业的发展提供参考。 关键词：农作物，并行算法，模型，云计算，Hadoop doi ：10.3969/j.issn.1002-6819.2013.08.021 中图分类号：S126；TP291 文献标志码：A 文章编号：1002-6819(2013)-08-0 179-08 赵青松，陈 林，孙 波，等. 基于Hadoop的云环境下作物生长模型算法的实现与测试[J]. 农业工程学报，2013， 29(8)：179－186. Zhao Qingsong, Chen Lin, Sun Bo, et al. Algorithm implementation and tested of crop growth model based on hadoop of cloud computing[J]. Transactions of the Chinese Society of Agricultural Engineering (Transactions of the CSAE), 20 13, 29(8): 179－186. (in Chinese with English abstract)  computing ）和网格计算 （grid computing ）的发展， 0 引 言 [3] 或者说是这些科学概念的商业实现 。Hadoop 作为 作物生长模型是以解析作物系统结构、功能及 云计算基础架构的开源软件，堪称业界最成熟的经 行为为目标，通过可解释的定量数学方程揭示作物 典案例，是一个能够对海量数据进行分布式处理的 生长发育过程及其与环境要素之间的关系，是数字 软件框架，可以运行在大型集群的廉价硬件设备 [1] [4] 农业的重要工具 。近年来，随着作物模型的区域 上，实现对集群的控制和管理 。目前，云计算技 性应用需求不断增加，作物模型需要与气象模型、 术已在地震监测、DNA 信息分析和互联网服务等方 生态环境模型以及GIS 等技术结合，其区域性明显， [5] 面具有广阔的应