大数据场景下基于HDFS的云存储服务系统设计.docVIP

精品文档（可编辑） 值得下载 大数据场景下基于HDFS的云存储服务系统设计 摘要：本文通过构建大数据场景下基于HDFS的云存储服务系统，能够有效地存储海量数据，实现用户的文件数据进行分布式存储，并达到降低分布式文件系统成本的目的。 关键词：大数据 云存储 Hadoop HDFS 中图分类号：TP3 文献标识码：A 文章编号：1007-9416（2014）02-0172-01 1 引言 随着移动互联网以及物联网的发展，“大数据”渐渐成为发展的一种趋势，如何有效存储数据成为我们面临的一个问题，云存储技术成为首要选择。因为用户不需要进行硬件的管理和维护，它本身能够根据所需容量大小对用户数据进行定制，从而大大缩减了用户的成本和人力的投入。另外云存储技术具有易扩充、价格低、易管理等优点，同时它也可以通过对外提供数据的存储以及业务的访问功能，以降低数据管理和运维成本。Hadoop分布式文件系统（HDFS）是一个运行在普通的硬件之上的分布式文件系统，具有高传输率、高容错性等特点，来满足当前海量数据的存储管理问题。 本文主要提出了一种在大数据场景下基于HDFS的云存储服务系统设计方案，满足对大数据进行高效存储的需求。 2 HDFS数据管理机制分析 Hadoop是一个分布式系统基础架构，由Apache基金会开发。它实现了一个分布式文件系统，简称HDFS。