云计算Hadoop安装、配置和调试实验报告.docVIP

实验报告书 课程名： 云计算技术 题 目： 实验三 Hadoop安装、配置和调试 实验类别 【验证】 班 级： 学 号： 姓 名： 1．实验内容 Hadoop的安装、配置、调试 2．实验目的 （1）Hadoop运行环境的设置 （2）Hadoop的启动 （3）Hadoop的查看 3．实验步骤 1、在namenode上，即hadoopm上node上不用） Hadoop用户登录。 下载hadoop-1.2.1（安装包默认存放在/root目录下），将其解压到/usr/local目录下，解压后目录形式是/usr/local/hadoop-1.2.1。使用如下命令: $cd /root $tar zxvf hadoop-1.2.1.tar.gz //解压 $cp hadoop-1.2.1 /usr/local //拷贝hadoop-1.2.1到/usr/local目录下 $mv hadoop-1.2.1 hadoop 创建tmp目录： mkdir hadoop/tmp (1)配置Hadoop的配置文件 (a)配置hadoop-env.sh $ vi /usr/local/hadoop/conf/hadoop-env.sh # set java environment export JAVA_HOME=/usr/java/jdk1.7.0_40 (b)分别配置core-site.xml，hdfs-site.xml和mapred-site.xml三个配置文件，配置如下：[之前的实验做ip和hostname的映射，因此，后面ip的地方可以用hostname]!—core-site.xml-- [root@hadoop1 local]# vi hadoop/conf/core-site.xml ?xml version=1.0? ?xml-stylesheet type=text/xsl href=configuration.xsl? !-- Put site-specific property overrides in this file. -- configuration property namehadoop.tmp.dir/name value/usr/local/hadoop/tmp/value /property property name/name valuehdfs://6:9000/value //改成自己namenode名称或ip /configuration !—hdfs-site.xml-- [root@hadoop1 local]# vi hadoop/conf/hdfs-site.xml ?xml version=1.0? ?xml-stylesheet type=text/xsl href=configuration.xsl? !-- Put site-specific property overrides in this file. -- configuration property namedfs.replication/name value1/value副本个数，不配置默认是3,应小于datanode机器数量 /property /configuration !—mapred-site.xml-- [root@hadoop1 local]# vi hadoop/conf/mapred-site.xml ?xml version=1.0? ?xml-stylesheet type=text/xsl href=configuration.xsl? !-- Put site-specific property overrides in this file. -- configuration property namemapred.job.tracker/name value6:9001/value//改成自己namenode名称或ip /configuration (c)配置masters文件,加入namenode的ip $vi /usr/local/hadoop/conf/masters 6 //改成自己namenode名称或ip 7 //改成自己datanode名称或ip 2、 Hadoop集群启动 将jdk和配置好的hadoop文件通过ssh