Hadoop分布式文件系统结构与设计.docVIP

北华大学计算机科学技术 分布式云计算论文 学生姓名： 杨天瑞 学 号： 33 专 业： 网络工程 指导教师： 李益民 二零一六年四月  Hadoop分布式文件系统：结构与设计 网络13－2 33 号 摘要 Hadoop 分布式文件系统 (HDFS)是一个设计为用在普通硬件设备上的分布式文件系统。它与现有的分布式文件系统有很多近似的地方，但又和这些文件系统有很明显的不同。HDFS 是高容错的，设计为部署在廉价硬件上的。HDFS对应用程序的数据提供高吞吐量，而且适用于那些大数据集应用程序。HDFS开放了一些POSIX的必须接口，容许流式访问文件系统的数据。HDFS最初是为了Apache 的Nutch网络搜索引擎项目的下层构件而设计的。是Hadoop项目的一部分，而这又是Apache的 Lucene项目的一部分。 ：HDFS，Hadoop，问文件系统，Lucene。 11. 硬件错误 　　硬件错误是正常的，而不是异常。HDFS实例由成百上千个服务器组成，每个都存储着文件系统的一部分数据。事实上，这就会有大量的组件，而 每个组件出故障的可能性都很大，这意味着HDFS总有一些组件是不能工作的。因此，检测错误并快速自动恢复就