基于染色的分布式弱连通分量求解算法①.PDFVIP

2014 年 第 23 卷 第 5 期 计 算 机 系 统 应 用 基于染色的分布式弱连通分量求解算法① 肖有诰, 谭菊仙, 李 璞 (江南计算技术研究所, 无锡 214083) 摘 要: 社交网络、生物信息网络等链接关系数据呈现爆炸性增加, 对亿万个顶点级别的大图处理需求愈加迫切, 传统的图算法对单点内存的计算依赖性已经不能满足数据规模急速增长的需求. 本文针对图的弱连通分量求解 问题, 提出了一种快速、可扩展的迭代染色算法 CR, 并建立了算法的 MapReduce 模型. 最后, 在 Hadoop 平台上, 对斯坦福大学社会网络分析实验室提供的四组通联数据进行测试, 并和开源的数据挖掘工具箱 XRIME 提供的算 法进行了对比. 关键词: 弱连通分量; 染色算法; MapReduce; XRIME Distributed Coloring Algorithm for Weakly Connected Components XIAO You-Gao, TAN J