SparkDE一种基于RDD云计算模型的并行差分进化算法-计算机科学.PDFVIP

第 43 卷第9 期 计算机科学 Vo1. 43 No.9 2016 年 9 月 Computer Science Sep 2016 SparkDE: 一种基于 RDD 云计算模型的并行差分进化算法 谭旭杰1 邓长寿1 董小刚1 袁斯吴1 吴志健2 彭虎2 (九江学院信息科学与技术学院 九江 332005)1 (武汉大学软件工程国家重点实验室 武汉 430072)2 摘 要 云计算 MapReduce 并行编程模型广泛应用于数据密集型应用领域，基于该模型的开源平台 Hadoop 在大数 据领域获得了成功应用。然而，对于计算密集型任务，特别是迭代运算，频繁启动 Map 和 Reduce 过程将导致负载过 大，影响计算效率。弹性分布式数据集(RDD)是一种基于内存的集群计算模型，有效地支持迭代运