hdfs中海量小文件合并与预取优化方法的研究-计算机科学.pdfVIP

  • 20
  • 0
  • 约2.62万字
  • 约 5页
  • 2018-11-16 发布于天津
  • 举报

hdfs中海量小文件合并与预取优化方法的研究-计算机科学.pdf

第卷第期计算机科学年月中海量小文件合并与预取优化方法的研究郑逼郭卫斌范贵生华东理工大学信息科学与工程学院上海摘要在存储海量文件时具有明显的优势但在存储小文件占绝大多数的海量文件时单个的存储架构会导致其性能严重降低为此提出一种基于合并思想的方案即将小文件合并为大文件同时建立小文件到合并文件的映射关系并将其存于中为了提高读取速度建立了基于的预取机制实验表明该方法能明显提高在处理海量文件时的整体性能关键词海量文件合并映射预取机制中固法分类号文献标识码于存储管理的命名空间用于存储文件的数引言据块的架构如

第 44 卷第11A 期 Vo l. 44 No. 11A 计算机科学 2017 年 11 月 COMPUTER SCIENCE Nov.2017 HDFS 中海量小文件合并与预取优化方法的研究

文档评论(0)

1亿VIP精品文档

相关文档