22Hadoop伪分布环境搭建Hadoop大数据平台搭建58课件讲解.pptxVIP

  • 0
  • 0
  • 约2.47千字
  • 约 22页
  • 2026-03-06 发布于陕西
  • 举报

22Hadoop伪分布环境搭建Hadoop大数据平台搭建58课件讲解.pptx

邢台职业技术学院柴旭光《Hadoop大数据平台搭建》2-2Hadoop伪分布环境搭建

课程学习目标和学习内容学习目标掌握hadoop伪分布环境的搭建掌握hadoop环境的测试方式学习内容

CONTENTS学习内容123上传、解压缩文件配置环境变量修改配置文件4测试环境

01上传,解压缩文件

1.上传文件(1)应用winscp软件将hadoop压缩包上传应用winscp软件将hadoop压缩包上传至linux的/opt/software文件夹下上传、解压缩文件

2.解压缩文件root用户下,将上传的hadoop压缩包解压缩至linux的/usr/local/src文件夹下解压缩后,将解压缩后的文件夹重命名为hadoop上传、解压缩文件

02配置环境变量

1.配置hadoop环境变量root用户下,输入命令vi/etc/profile打开配置文件在最下面添加hadoop的路径信息exportHADOOP_HOME=/usr/local/src/hadoopexportPATH=:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH保存并退出后,执行source/etc/profile让配置生效然后输入命令hadoop,出现如右下图信息代表环境变量配置成功配置环境变量

03修改配置文件

1.修改hadoop-env.sh文件root用户下,输入命令cd/usr/local/src/hadoop/etc/hadoop/进入到hadoop文件夹下然后输入vihadoop-env.sh打开配置文件然后将JAVA_HOME的值修改为绝对路径,如图修改配置文件

2.修改core-site.xml文件root用户下,输入命令cd/usr/local/src/hadoop/etc/hadoop/进入到hadoop文件夹下然后输入vicore-site.xml打开配置文件然后将在configuration和/configuration标签中间添加信息:propertynamefs.defaultFS/namevaluehdfs://:9000/value/propertypropertynamehadoop.tmp.dir/namevalue/usr/local/src/hadoop/tmp/value/propertyIP地址注意是自己的IP地址,红色的地方是临时文件夹的路径,配置完后,执行命令mkdir-p/usr/local/src/hadoop/tmp保证这个文件夹存在修改配置文件

3.修改hdfs-site.xml文件root用户下,输入命令cd/usr/local/src/hadoop/etc/hadoop/进入到hadoop文件夹下然后输入vihdfs-site.xml打开配置文件,在configuration标签中添加propertynamedfs.replication/namevalue1/value/propertypropertyname.dir/namevaluefile:///usr/local/src/hadoop/tmp/dfs/name/value/propertypropertynamedfs.datanode.data.dir/namevaluefile:///usr/local/src/hadoop/tmp/dfs/data/value/property修改配置文件

4.修改权限root用户下需要创建存放数据的文件夹:(1)/usr/local/src/hadoop/tmp/dfs/name(2)/usr/local/src/hadoop/tmp/dfs/data(3)/usr/local/src/hadoop/logs并且将logs和tmp文件夹的所有者权限修改为hadoop,在hadoop目录下,输入命令:chown-Rhadooptmp/chown-Rhadooplogs/修改配置文件

04测试环境

1.初始化hdfs文件系统hadoop用户下,输入命令cd/usr/local/src/hadoop/切换到hadoop根目录,然后输入命令bin/hadoopnamenode-format,初始化hdfs文件系统测试环境

2.启动Hadoop服务在hadoop用户下,输入命令cd/usr/local/src/hadoop/切换到hadoop根目录下后,输入命令sbin/start-all.sh,启动ha

文档评论(0)

1亿VIP精品文档

相关文档