Hadoop2.6+HA+Zookeeper3.4.6+HBase1.0.0集群安装.docx

Hadoop2.6+HA+Zookeeper3.4.6+Hbase1.0.0安装 安装hadoop2.6+HA1.准备一台CentOS6.4系统2.环境CentOS6.4 共5台机器名 ip地址 安装软件 运行进程?master1 192.168.3.141 hadoop、Zookeeper、hbase NN、RM、DFSZKFC、journalNode、HMaster、QuorumPeerMain?master2 192.168.3.142 hadoop、Zookeeper、hbase NN、RM、DFSZKFC、journalNode、 HRegionServer、QuorumPeerMain?slave1 192.168.3.143 hadoop、Zookeeper、hbase DN、NM、journalNode、HRegionServer、QuorumPeerMain?slave2 192.168.3.144 hadoop、Zookeeper、hbase DN、NM、journalNode、HRegionServer、QuorumPeerMain?slave3 192.168.3.145 hadoop、Zookeeper、hbase DN、NM、journalNode、HRegionServer、QuorumPeerMain3.此时我们先对第一台机器做修改，其他的后期克隆该机器即可4.修改/etc/hosts文件?修改/etc/sysconfig/network?5.重启机器?或者?临时修改hostname6.安装JDK将JDK解压?编辑/etc/profile 添加jdk路径?保存退出?修改CentOS里的java优先级?此时JDK已经安装完成?7.解压hadoop并修改环境变量8.修改配置文件8.1 修改$HADOOP_HOME/etc/hadoop/slaves文件?加入所有slave节点的hostname??8.2 修改$HADOOP_HOME/etc/hadoop/hadoop-env.sh文件?修改JAVA_HOME路径??8.3 修改$HADOOP_HOME/etc/hadoop/yarn-env.sh文件?修改JAVA_HOME路径??8.4 修改HADOOPHOME/etc/hadoop/core?site.xml文件详见附件8.5修改HADOOP_HOME/etc/hadoop/hdfs-site.xml文件?详见附件?8.6 修改HADOOPHOME/etc/hadoop/mapred?site.xml文件详见附件8.7修改HADOOP_HOME/etc/hadoop/yarn-site.xml文件?详见附件（yarn.resourcemanager.ha.id的属性值在master2机器中需要更改为rm2）?8.8 添加$HADOOP_HOME/etc/hadoop/fairscheduler.xml文件?详见附件?8.9 创建相关文件夹?根据xml配置文件，建立相应的文件夹?此时Hadoop+HA配置文件已经配好，就差ssh免密码登录+格式化Hadoop系统。?等我们装完所有软件（Zookeeper+hbase），克隆机器后再进行ssh免密码登录及Hadoop格式化。克隆后还需要更改每个节点的/etc/sysconfig/network中的hostname，以及更改master2中$HADOOP_HOME/etc/hadoop/yarn-site.xml文件的yarn.resourcemanager.ha.id属性值为rm2安装Zookeeper3.4.61.解压Zookeeper2.Zookeeper环境变量的配置??添加Zookeeper的路径?3.更改配置文件将conf/zoo_sample.cfg改成conf/zoo.cfg?然后对zoo.cfg进行更改??4.在DataDir路径下创建myid文件根据配置文件的dataLogDir路径?创建/soft/zookeeper-3.4.6/var/datalog文件夹??创建/soft/zookeeper-3.4.6/var文件夹?再创建/soft/zookeeper-3.4.6/var/data文件夹?再创建/soft/zookeeper-3.4.6/var/data/myid文件??向其中输入数字1 （对应zoo.cfg文件server后的数字）?其他节点在克隆后应根据zoo.cfg中对应的值进行更改?安装Hbase1.0.01.修改本机配置2.修改配置文件??conf/hbase-site.xml详见附件（注意hbase.rootdir的值 用ip地址表示）?根据conf/hbase-site.xml中hbase.tmp.dir值来