hadoop集群安装..docxVIP

Hadoop集群的安装Hadoop集群的安装分为三个部分：安装前的准备工作主节点和子节点都需要安装的部分三、主节点需要配置的部分下面就Hadoop集群的安装按照上面三个部分来：安装前的准备工作：1、在客户端（自己本机）上安装VMware-viClient-all-5.0.0-623373.exe（1）2、登陆刚才安装的软件：VMware vSphere Client3、单击清单如下图：4、56综合分析张青青机器linux环境已经装好的前提下、按照下面的顺序做二、主节点和子节点都需要安装的部分（一个机器安装好，可以克隆到其它机器上）5、网络配置6、改主机名用root用户进入：上面的配置需要重启才能生效。7、ping IP（CRT连不上时，此处重新执行）8、配置config9、子节点互通配置10、不需密码配置11、把安装文件放到指定的目录。把cdh目录放到56机器/var/www/html目录下(2)下面是从38把cdh目录cp到156:/var/www/html,用SCP命令可能会遇到下面事项：1)先把每个节点的防火墙关闭：LANG=C setup2)在238上运行命令sudo ssh-keygen -R 10.0. 7.157（接收目录的IP）Sudoscp–r cdh 56:/var/www/html12、放cloudera-chd4.repo、cloudera-impala.repo和cloudera-manager.repo 3个文件到各主机的/etc/yum.repos.d/目录下（3）下面是从38 主机上SCP到 56:/etc/yum.repos.d/13、在各主机/home/boco上安装createrepo-0.9.8-5.el6.noarch.rpmdeltarpm-3.5-0.5it.el6.x86_64.rpmftp-0.17-51.1.el6.x86_64.rpmpython-deltarpm-3.5-0.5it.el6.x86_64.rpmvsftpd-2.2.2-11.el6.x86_64.rpm（4） 5个.rpm文件。下面是安装5个rpm文件的截图14、编辑cloudera文件15、安装.rpm文件和启动httpd start16、安装cloudera-manager-installer.bin（5）下面一直点NEXT或YES主节点需要配置的部分1、用那个主机作为主节点，就用那个IP登陆 IP:7180/cmf/login;2、跳过3、这步特别重要，要输入集群中所有的IP,每行一个IP，回车换行。4、这步需要选的很多，比照下面的来选（做）就OK。5、到此hadoop集群就安装完成了。注：1、红色标出的都是安装过程中需要的文件。2、安装中问题：把一个节点的第二步都装好了，把它克隆到其它主机上，再把克隆到的主机的IP和主机名改下(也就是安装步骤5和6)，注意改好之后一定要重启，不然就会遇到下面的问题。3、hadoop完成后，要在hdfs上创建目录会遇到下面问题：输入下面命令：sudo -u hdfshadoopfs -mkdir /user/bocosudo–u hdfshadoopfs–chownboco:boco/user/boco[root@hadoop1 ~]# sudo -u hdfshadoopfs -mkdir /user/root[root@hadoop1 ~]# sudo -u hdfshadoopfs -chownroot:root /user/root[root@hadoop1 ~]# hadoopfs -mkdir test