一种基于纠删码的数据放置容错算法-计算机应用研究.PDF

第３１卷第９期 计 算 机 应 用 研 究 Ｖｏｌ．３１Ｎｏ．９ 　 　 ２０１４年９月　 ＡｐｐｌｉｃａｔｉｏｎＲｅｓｅａｒｃｈｏｆＣｏｍｐｕｔｅｒｓ Ｓｅｐ．２０１４ 一种基于纠删码的数据放置容错算法 葛君伟，陈志林，方义秋 （重庆邮电大学计算机科学与技术学院，重庆４０００６５） 摘　要：在基于纠删码技术的云存储系统中，如何选择合适的存储节点来放置经编码生成的多个冗余数据块、 有效保证数据的容错性是云存储系统面临的一大挑战。提出的ＣＨＧＤＰＳ（ｃｏｎｓｉｓｔｅｎｔｈａｓｈａｎｄｇｒｅｅｄｙｄａｔａｐｌａｃｅ ｍｅｎｔａｌｇｏｒｉｔｈｍｂａｓｅｄｏｎｓｅｔｓ）算法在基于划分集合的思想上，将一致性ｈａｓｈ方法与贪婪算法相结合，极大地减少 了数据传输时间。实验结果表明，该算法具有更短的总体平均访问时间和更长的平均无故障时间，提高了数据 的容错性。 关键词：云存储；一致性哈希算法；贪婪算法；集合；容错性 中图分类号：ＴＰ１８；ＴＰ３０１．６　　　文献标志码：Ａ　　　文章编号：１００１３６９５（２０１４）０９２６８８０４ ｄｏｉ：１０．３９６９／ｊ．ｉｓｓｎ．１００１３６９５．２０１４．０９．０３０ Ｅｒａｓｕｒｅｃｏｄｅｓｂａｓｅｄｄａｔａｐｌａｃｅｍｅｎｔｆａｕｌｔｔｏｌｅｒａｎｔａｌｇｏｒｉｔｈｍ ＧＥＪｕｎｗｅｉ，ＣＨＥＮＺｈｉｌｉｎ，ＦＡＮＧＹｉｑｉｕ （ＳｃｈｏｏｌｏｆＣｏｍｐｕｔｅｒＳｃｉｅｎｃｅ，ＣｈｏｎｇｑｉｎｇＵｎｉｖｅｒｓｉｔｙｏｆＰｏｓｔｓ＆Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ，Ｃｈｏｎｇｑｉｎｇ４０００６５，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ：Ｉｎｅｒａｓｕｒｅｃｏｄｅｓｔｅｃｈｎｏｌｏｇｙｂａｓｅｄｃｌｏｕｄｓｔｏｒａｇｅｓｙｓｔｅｍｓ，ｈｏｗｔｏｃｈｏｏｓｅｔｈｅａｐｐｒｏｐｒｉａｔｅｓｔｏｒａｇｅｎｏｄｅｓｔｏｐｌａｃｅｔｈｅ ｍｕｌｔｉｐｌｅｒｅｄｕｎｄａｎｔｅｎｃｏｄｅｄｄａｔａｂｌｏｃｋｓ，ｅｆｆｅｃｔｉｖｅｌｙｅｎｓｕｒｉｎｇｄａｔａｆａｕｌｔｔｏｌｅｒａｎｃｅｉｓｃｌｏｕｄｓｔｏｒａｇｅｓｙｓｔｅｍｓｆａｃｅｄａｂｉｇｃｈａｌ ｌｅｎｇｅ．ＴｈｉｓｐａｐｅｒｄｅｖｅｌｏｐｅｄａｎａｌｇｏｒｉｔｈｍＣＨＧＤＰＳ（ｃｏｎｓｉｓｔｅｎｔｈａｓｈａｎｄｇｒｅｅｄｙｄａｔａｐｌａｃｅｍｅｎｔａｌｇｏｒｉｔｈｍｂａｓｅｄｏｎｓｅｔｓ）．Ｏｎ ｔｈｅｂａｓｅｄｏｎｔｈｅｉｄｅａｏｆｃｌａｓｓｉｆｉｅｄｓｅｔ，ｉｔｃｏｍｂｉｎｅｄｇｒｅｅｄｙａｌｇｏｒｉｔｈｍａｎｄｃｏｎｓｉｓｔｅｎｔｈａｓｈ，ｇｒｅａｔｌｙｒｅｄｕｃｅｄｔｈｅｄａｔａｔｒａｎｓｍｉｓｓｉｏｎ ｔｉｍｅ．ＥｘｐｅｒｉｍｅｎｔａｌｒｅｓｕｌｔｓｓｈｏｗｔｈａｔｔｈｅｐｒｏｐｏｓｅｄａｌｇｏｒｉｔｈｍｈａｓａｓｈｏｒｔｅｒｏｖｅｒａｌｌｍｅａｎａｃｃｅｓｓｔｉｍｅａｎｄａｌｏｎｇｅｒＭＴＢＦ，ｉｍ ｐｒｏｖｅｓｄａｔａｆａｕｌｔｔｏｌｅｒａｎｃｅ． Ｋｅｙｗｏｒｄｓ：ｃｌｏｕｄｓｔｏｒａｇｅ；ｃｏｎｓｉｓｔｅｎｔｈａｓｈａｌｇｏｒｉｔｈｍ；ｇｒｅｅｄｙａｌｇｏｒｉｔｈｍ；ｓｅｔ；ｆａｕｌｔｔｏｌｅｒａｎｔ 储系统容错性问题，即对一个数据对象创建多个相同的数据副 　引言 本，并把得到的多个副本散布到不同的存储节点上。当若干数 据对象失效以后，可以通过访问其他有效的副本获取数据。常 随着信息技术的发展，在科学研究、社会生活等诸多领域