原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
Block Rep. 1. Shutdown one DataNode B 2. copy file from local to DFS 3. startup DataNode B 4. result show below Block Rep. DataNode B is working on receiving data from another live DataNode in order to build another replica Instruction from NameNode 2011-06-08 14:48:00,836 INFO org.apache.hadoop.hdfs.StateChange: BLOCK* ask 21:50010 to replicate blk_5615695057108681780_2953 to datanode(s) 14:50010 QA Thanks * * * * * * * * * * * * * * * * * * * * * * * Hadoop Study Hadoop Environment Configuration http://expedia-cloud.vi/ Jack Zheng(v-jazheng@) 2012/05/10 Ref: Hadoop Architecture and its Usage at Facebook Environment Prepare Computer: DataNode 11 DataNode 12 DataNode 13 NameNode 14 Known Secondary NameNode vs CheckPoint Node vs NFS vs Backup Node? Important Concept HDFS Map/Reduce Job Task HDFS 启动脚本 在 $HADOOP_HOME/bin目录下，包含一些用来启动Hadoop DFS 和 HadoopMap/Reduce daemons的脚本。如下： start-all.sh - 启动所有的 Hadoop daemons如： namenode, datanodes, jobtracker和 tasktrackers. stop-all.sh - 停止所有的 Hadoop daemons。 start-mapred.sh - 启动 Hadoop Map/Reduce daemons, the jobtracker 和 tasktrackers stop-mapred.sh - 关闭 Hadoop Map/Reduce daemons. start-dfs.sh - 开启Hadoop DFS daemons, the namenode and datanodes. stop-dfs.sh - 关闭 Hadoop DFS daemons.. 配置文件 $HADOOP_HOME/conf目录下包含一些必要的配置文件 hadoop-env.sh：包含Hadoop设置的一些环境变量。你可以使用他们影响Hadoop Deamons的行为，例如：日志文件的存储地点、 最大数量的堆栈内存的使用等等. 必须修改的一个环境变量是JAVA_HOME, 用来指明你的JDK1.5.x的安装路径。 slaves ：这个文件每行列出一个HOST的信息，在这些HOST上 Hadoop slave daemons (datanodes 和 tasktrackers)运行其上. 默认是一行： localhost hadoop-default.xml ：对Hadoop daemons 和 Map/Reduce jobs的通用设置， 请不要修改 mapred-default.xml ：此文件包含具体每个节点对 Hadoop Map/Reduce daemons 和 jobs的设置信息。默认为空。 本文件的设置属性会覆盖 在 hadoop-default.xml file中的相同设置。 用这个文件来配置你的节点上的 Map/Reduce行为。 hadoop-site.xml： 此文件包含具体每个节点对所有 Hadoop daemons 和 Map/Reduce jobs的设置。此文件默认为空。在此文件设置的属性会覆盖在 hadoop-default.xml 和 mapred-default.xml的 设置。 这个文件应该包含：所有的服务端和客户端都遵从的设置，例如 在安装位置上的 namenode 和 jobtracker。 Configuration /blog/1407311 Environment Prepare Software CentOS-5.5-x86_6
文档评论（0）