- 0
- 0
- 约2.47千字
- 约 22页
- 2026-03-06 发布于陕西
- 举报
邢台职业技术学院柴旭光《Hadoop大数据平台搭建》2-2Hadoop伪分布环境搭建
课程学习目标和学习内容学习目标掌握hadoop伪分布环境的搭建掌握hadoop环境的测试方式学习内容
CONTENTS学习内容123上传、解压缩文件配置环境变量修改配置文件4测试环境
01上传,解压缩文件
1.上传文件(1)应用winscp软件将hadoop压缩包上传应用winscp软件将hadoop压缩包上传至linux的/opt/software文件夹下上传、解压缩文件
2.解压缩文件root用户下,将上传的hadoop压缩包解压缩至linux的/usr/local/src文件夹下解压缩后,将解压缩后的文件夹重命名为hadoop上传、解压缩文件
02配置环境变量
1.配置hadoop环境变量root用户下,输入命令vi/etc/profile打开配置文件在最下面添加hadoop的路径信息exportHADOOP_HOME=/usr/local/src/hadoopexportPATH=:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH保存并退出后,执行source/etc/profile让配置生效然后输入命令hadoop,出现如右下图信息代表环境变量配置成功配置环境变量
03修改配置文件
1.修改hadoop-env.sh文件root用户下,输入命令cd/usr/local/src/hadoop/etc/hadoop/进入到hadoop文件夹下然后输入vihadoop-env.sh打开配置文件然后将JAVA_HOME的值修改为绝对路径,如图修改配置文件
2.修改core-site.xml文件root用户下,输入命令cd/usr/local/src/hadoop/etc/hadoop/进入到hadoop文件夹下然后输入vicore-site.xml打开配置文件然后将在configuration和/configuration标签中间添加信息:propertynamefs.defaultFS/namevaluehdfs://:9000/value/propertypropertynamehadoop.tmp.dir/namevalue/usr/local/src/hadoop/tmp/value/propertyIP地址注意是自己的IP地址,红色的地方是临时文件夹的路径,配置完后,执行命令mkdir-p/usr/local/src/hadoop/tmp保证这个文件夹存在修改配置文件
3.修改hdfs-site.xml文件root用户下,输入命令cd/usr/local/src/hadoop/etc/hadoop/进入到hadoop文件夹下然后输入vihdfs-site.xml打开配置文件,在configuration标签中添加propertynamedfs.replication/namevalue1/value/propertypropertyname.dir/namevaluefile:///usr/local/src/hadoop/tmp/dfs/name/value/propertypropertynamedfs.datanode.data.dir/namevaluefile:///usr/local/src/hadoop/tmp/dfs/data/value/property修改配置文件
4.修改权限root用户下需要创建存放数据的文件夹:(1)/usr/local/src/hadoop/tmp/dfs/name(2)/usr/local/src/hadoop/tmp/dfs/data(3)/usr/local/src/hadoop/logs并且将logs和tmp文件夹的所有者权限修改为hadoop,在hadoop目录下,输入命令:chown-Rhadooptmp/chown-Rhadooplogs/修改配置文件
04测试环境
1.初始化hdfs文件系统hadoop用户下,输入命令cd/usr/local/src/hadoop/切换到hadoop根目录,然后输入命令bin/hadoopnamenode-format,初始化hdfs文件系统测试环境
2.启动Hadoop服务在hadoop用户下,输入命令cd/usr/local/src/hadoop/切换到hadoop根目录下后,输入命令sbin/start-all.sh,启动ha
您可能关注的文档
最近下载
- 020——《山经》河水下游及其支流考.pdf
- 新人教版小学六年级数学上册教学课件(全册).pptx VIP
- 安徽A10联盟2026届高三2月学情检测(开年考)数学试卷(含答案解析).pdf
- 中考语文 作文天津中考作文真题分析.pdf VIP
- 教学评一致性的研究.doc VIP
- DB23T1501-2013 水利堤(岸)坡防护工程格宾与雷诺护垫施工技术规范.pdf VIP
- 2025年学历类自考专业(国贸)国际商务英语-外贸英语写作参考题库含答案解析.docx VIP
- 智慧停车安全培训课件.pptx VIP
- 农村会计试题及答案解析.docx VIP
- 癌症患者生活质量量表EORTC QLQ-C30.docx VIP
原创力文档

文档评论(0)