分布式数据库大作业.docVIP

分布式数据库大作业 分布式数据库大作业 PAGE 分布式数据库大作业 分布式数据库大作业 Hadoop MapReduce云计算模型研究 学院： 软件学院 专业： 软件工程 2014年01月02日 大连理工大学 Hadoop MapReduce云计算模型研究 引言 Hadoop[1]是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。简单地说来，Hadoop是一个可以更容易开发和运行处理大规模数据的软件平台。其包括两个部分：HDFS[2]和MapReduce[3]。 DFS即HadoopDistributedFileSystem(Hadoop分布式文件系统)，HDFS具有高容错性，并且可以被部署在低价的硬件设备之上。HDFS很适合那些有大数据集的应用，并且提供了对数据读写的高吞吐率。HDFS是一个master/slave的结构，就通常的部署来说，在master上只运行一个Namenode，而在每一个slave上运行一个Datanode。HDFS支持传统的层次文件组织结构，同现有的一些文件系统在操作上很类似，比如你可以创建和删除一个文件，把一个文件从一个目录移到另一个目录，重命名等等操作。Namenode管理着整个分布式