一种基于纠删码的数据放置容错算法.pdfVIP

第31卷第9期 计 算 机 应 用 研 究 V0l_31No．9 2014年 9月 Application ResearchofComputers Sep．2014 一 种基于纠删码的数据放置容错算法术 葛君伟，陈志林，方义秋 (重庆邮电大学计算机科学与技术学院，重庆 400065) 摘 要：在基于纠删码技术的云存储系统中，如何选择合适的存储节点来放置经编码生成的多个冗余数据块、 有效保证数据的容错性是云存储系统面临的一大挑战。提 出的CHGDPS(consistenthashandgreedydataplace． mentalgorithmbasedonsets)算法在基于划分集合的思想上，将一致性hash方法与贪婪算法相结合，极大地减少 了数据传输时间。实验结果表明，该算法具有更短的总体平均访问时间和更长的平均无故障时间，提高了数据 的容错性。 关键词：云存储；一致性哈希算法；贪婪算法；集合；容错性 中图分类号 ：TP18；TP301．6 文献标志码：A 文章编号 ：1001．3695(2014)09．2688．04 doi：10．3969／j．issn．1001—3695．2014．09．030 Erasurecodes-b·aseddataplacementfault--tolerantalgorithm GEJun—wei，CHEN Zhi—lin，FANG Yi—qiu (SchoolofComputerScience，ChongqingUniversityofPosts＆Telecommunications，Chongqing400065，China) Abstract：Inerasurecodestechnology—basedcloudstoragesystems，howtochoosetheappropriatestoragenodestoplacethe multipleredundantencodeddatablocks，effectivelyensuringdatafaulttoleranceiscloud storagesystemsfacedabigchal— lenge．ThispaperdevelopedanalgorithmCHGDPS(consistenthashandgreedydataplacementalgorithmbasedonsets)．On thebasedontheideaofclassifiedset．itcombinedrgeedyalgorithm andconsistenthash．rgeatlyreducedthedatatransmission time．Experimentalresultsshow thattheproposedalgorithm hasashorteroverallmeanaccesstimeandalongerMTBF，im— provesdatafaulttolerance． Keywords：cloudstorage；consistenthashalgorithm ；rgeedyalgorithm；set；fault—tolerant 储系统容错性问题，即对一个数据对象创建多个相同的数据副 0 引言 本 ，并把得到的多个副本散布到不同的存储节点上。当若干数 据对象失效以后 ，可以通过访问其他有效的副本获取数据。常 随着信息技术的发展，在科学研究、社会生活等诸多领域 用的副本布局方法有两种：a)通过集中式的存储 目录来定位 每天都产生新的海量数据，而且数据量仍在快速增加。图