RedHat7.2上安装Hadoop2.6教程.docxVIP

RedHat7.2系统下完全分布式Hadoop2.6的安装配置一、安装RedHat7.2（过程略）6台服务器系统安装完成后手动配置每台的IP地址，地址表为：切换到root用户，修改网络配置文件，命令： su root gedit /etc/sysconfig/network-scripts/ifcfg-eth0 按照以下方法配置：DEVICE=eth0 BOOTPROTO=staticIPADDR=43NETMASK= GATEWAY＝ ONBOOT=yes 修改主机名，命令： gedit /etc/hostname 修改为： redhat3修改hosts，把主机名映射到IP地址，命令： gedit /etc/hosts 修改为： 创建ndscbigdata用户，如果已经创建请忽略此步骤，命令： su - root usradd ndscbigdata passwd ndscbigdata重复步骤1，2，3 主机名分别修改为redhat3、redhat4、redhat5、redhat6、redhat7、redhat8 IP对应IP表二、配置SSH无密码登录前提：Hadoop要部署到ndscbigdata用户下，所以要配置ndscbigdata用户下各主机的无密码登录。本次部署要把redhat8作为master节点，其他五台作为slave节点。原理：首先ndscbigdata用户在 master上生成一个密 钥对，包括一个公钥和一个私钥，并将公钥复制到所有的 slave(redhat4-redhat8) 上。然后当 master 通 过 SSH 连接 slave 时， slave 就会生成一个随机数并用 master 的公 钥对随机数进行加密，并发送给 master ，master用自己的私钥进行解密得到解密数，并将解密数回传给slave，slave确认解密数无误之后就允许master不输入密码进行连接了。步骤：1.执行命令ssh-keygen -t rsa之后一路回车,查看刚生成的无密码钥对：cd ~/.ssh后执行 ll2.把id_rsa.pub 追加到授权的 key 里面去。执行命令 cat ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys3.修改权限： chmod 600 ~/.ssh/authorized_keys4.确保 cat /etc/ssh/sshd_config 中存在如下内容RSAAuthentication yesPubkeyAuthentication yesAuthorizedKeysFile????? .ssh/authorized_keys如需修改，则在修改后执行重启 SSH服务命令使其生效 :service sshd restart切换到redhat3机器上 创建 .ssh 文件夹，并修改权限: mkdir ~/.ssh chmod 700 ~/.ssh （必须把权限从744，改为700，不然不成功）切换到master机器（redhat8）上将公钥复制到redhat3机器上 : scp ~/.ssh/authorized_keys ndscbigdata@redhat3： ~/.ssh/? 然后输入yes，最后输入slave机器的密码7.切换到redhat3重复步骤48.验证命令 : 在master机器上执行 ssh 43 发现主机名由redhat8变成 redhat3即成功按照以上步 骤分别配置 redhat4,redhat5,redhat6,redhat7，要求每个都可以无密 码登录三、安装jdk1、解压jdk$ tar -zxvf jdk-8u60-linux-x64.tar.gz2、创建jvm文件夹$ sudo mkdir /usr/java3、移动jdk文件夹到jvm下$ sudo mv jdk-8u60-linux-x64.tar.gz /usr/java4、配置jdk环境变量4.1打开编辑文件$ sudo vi /etc/profile在最下面添加几行代码export JAVA_HOME=/usr/java/jdk-8u60-linux-x64export JRE_HOME=${JAVA_HOME}/jreexport CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/libexport PATH=${JAVA_HOME}/bin:$PATH然后保存退出，输入以下命令使之立即生效。$ source /etc/profile4.2验证jdk$ java -version四、关闭每台机器的防火墙$su - root$systemctl stop firewalld$systemctl disable fir