2.2 基于伪分布式Hadoop配置 (1)讲解.pptx

2.2 基于伪分布式Hadoop配置 (1)讲解.pptx

  1. 1、本文档共19页,可阅读全部内容。
  2. 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多

Hadoop部署基于伪分布式模式部署Hadoop

本节课目标Addatitlehere先定一个小目标!接下来,以自定义配置文件的方式实现基于伪分布式模式部署Hadoop。

在Hadoop安装目录/etc/hadoop/目录,执行“vihadoop-env.sh”命令,在hadoop-env.sh文件的底部添加如下内容。Addatitlehere配置Hadoop运行时环境基于伪分布式模式部署Hadoop

xAddatitlehere基于伪分布式模式部署Hadoop配置Hadoop运行时环境exportJAVA_HOME=/export/servers/jdk1.8.0_241exportHDFS_NAMENODE_USER=rootexportHDFS_DATANODE_USER=rootexportHDFS_SECONDARYNAMENODE_USER=rootexportYARN_RESOURCEMANAGER_USER=rootexportYARN_NODEMANAGER_USER=root指定Hadoop使用的JDK指定管理NameNode服务的用户root指定管理DataNode服务的用户root指定管理SecondNameNode服务的用户root指定管理ResourceManager服务的用户root指定管理NodeManager服务的用户root

在Hadoop安装目录/etc/hadoop/目录,执行“vicore-site.xml”命令,在core-site.xml文件中添加如下内容。Addatitlehere基于伪分布式模式部署Hadoop配置Hadoop

xAddatitlehere基于伪分布式模式部署Hadooppropertynamefs.defaultFS/namevaluehdfs://hadoop1:9000/value/propertypropertynamehadoop.tmp.dir/namevalue/export/data/hadoop-wfb-3.3.0/value/propertypropertynamehadoop.http.staticuser.user/namevalueroot/value/property指定HDFS的通信地址指定Hadoop临时数据的存储目录指定通过WebUI访问HDFS的用户root配置Hadoop

xAddatitlehere基于伪分布式模式部署Hadoop配置Hadooppropertynamexyuser.root.hosts/namevalue*/value/propertypropertynamexyuser.root.groups/namevalue*/value/propertypropertynameerval/namevalue1440/value/property允许任何用户组的root用户可以向Hadoop提交任务指定HDFS中被删除文件的存活时长为1440秒允许任何服务器的root用户可以向Hadoop提交任务

在Hadoop安装目录/etc/hadoop/目录,执行“vihdfs-site.xml”命令,在hdfs-site.xml文件中添加如下内容。Addatitlehere基于伪分布式模式部署Hadoop配置HDFS

xAddatitlehere基于伪分布式模式部署Hadoop配置HDFSpropertynamedfs.replication/namevalue1/value/propertypropertynamenode.secondary.http-address/namevaluehadoop1:9868/value/property指定HDFS的副本数为1指定SecondaryNameNode服务的通信地址

在Hadoop安装目录/etc/hadoop/目录,执行“vimapred-site.xml”命令,在mapred-site.xml文件中添加如下内容。Addatitlehere基于伪分布式模式部署Hadoop配置MapReduce

xAddatitlehere基于伪分布式模式部署Hadoop配置MapReducepropertyname/namevalueyarn/value/propertypropertynamemapreduce.jobhistory.address/namevaluehadoop1:10020/value/propertypropertynamemapre

文档评论(0)

方世玉 + 关注
实名认证
内容提供者

该用户很懒,什么也没介绍

版权声明书
用户编号:6101050130000123

1亿VIP精品文档

相关文档