1. 您所在位置：
  2. 网站首页
  3. 文档分类
  4. 行业资料
  5. 国内专利

一种基于Redis和HDFS的海量小文件存储方法.pdfVIP

  • 6
  • 0
  • 约7.62千字
  • 约 7页
  • 2023-06-03 发布于四川
  • 举报

一种基于Redis和HDFS的海量小文件存储方法.pdf

    本发明特别涉及一种基于Redis和HDFS的海量小文件存储方法。该基于Redis和HDFS的海量小文件存储方法，当小文件上传时，先将小文件存储在缓存数据库Redis中，配置定时器，定时检查小文件是否已达既定的合并阈值，当达到合并阈值后通过HDFS提供的接口将缓存文件合并，将合并后的缓存文件上传至HDFS即可。该基于Redis和HDFS的海量小文件存储方法，将小文件合并成SequenceFile存储在HDFS上，增加了小文件在HDFS中的存储效率，同时采用缓存的方式提高了小文件的读取性能，适宜推

    (19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 112650711 A (43)申请公布日 2021.04.13 (21)申请号 202011528833.7 G06F 16/182 (2019.01)

    您可能关注的文档

    最近下载

    文档评论（0）

    1亿VIP精品文档

    更多 >

    相关文档

    更多 >