原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
基于云平台的电信数据仓库文件备份和分布动态调整算法.pdf
第34卷第1期 南京邮电大学学报(自然科学版) V01．34No．1
of ofPostsand Feb．2014
2014年2月 Journal
N删ingUniversity Telecommunications(NaturalScience)
基于云平台的电信数据仓库文件备份和分布动态调整算法
杨苗苗，李跃辉，刘 静，许静
(南京邮电大学通信与信息工程学院，江苏南京210003)
摘要：Hadoop利用统一的备份机制来确保数据的可用性和容错性。然而对于重要的文件块，只能通过修改配置
文件来设置副本数量。通过分析电信业数据仓库文件的访问情况，提出文件备份与存放动态调整算法(BPDA)来
提高数据局部性，以减少数据传输带来的／／O和网络消耗，提高查询效率。运用多副本一致性哈希算法，概率采样
和竞争力弱化算法，得到每一个文件的最佳备份数和备份位置。实验结果验证了该算法可以提高查询关联效率。
关键词：Hadoop；MapReduce；备份；关联查询处理
中图分类号：TP391 文献标志码：A 文章编号2014)01-0111-05
File andLocation
Replication DynamicAdjustmentAlgorithm
for DataWarehouseBasedOHCloudPlatform
Telecom
YANG
Miao-miao，LIYue-hui，LIUJing，XUJing
ofTelecommunications＆Information ofPostsand
University Telecommunications，Nanjing210003，China)
(College Engineering，Nanjing
usesauniforiBdata schemetoensuredata andfaulttolerance．
Abstract：Hadoop replication availability
Foran data numberof can beset the file．
block．the
important replicatesonly bymodifyingconfiguration
data file andlocation
the offileaccessoftelecom
Throughanalysis warehouse，areplicate dynamicadjust-
it the／／Oandnet-
ment theBPDAis to thedata reduces
algorithm，calledproposedimprove locality，thus
workoverheadduetodata enhancesthe of
transmission，andefficiencyqueryprocessing．Usingmuhi—copy
Hash and number
consistencyalgo
文档评论（0）