Linux下Hadoop集群安装指南设计-mary-new!!!.docVIP

Linux下Hadoop集群安装指南 第一步：安装VMware（8.1.4） 如果机器是64位操作系统，安装VMware-workstation-full-8.0.0-471780，序列号：5F0Z1-24057-DZX88-4L97K-1AV2N 如果是32位操作系统，就用VMware-workstation-full-9 第二步：安装Ubuntu Linux（8.1.3） 1）在VMware上新创建一个虚拟机，选择镜像ubuntu-10.04.4-desktop-i386，选择保存为单个文件。 2）Full name就是机器名字，如Ubuntu-hadoop，username就是用户名，例如mimo，密码就是每次登陆linux的密码，虚拟机名可以写成写ubuntu-hadoop， 位置选择一个空间大的磁盘，尽量不要放在C盘 第三步：安装Hadoop云计算系统（8.1.5） 1. 创建Hadoop用户 2．安装Hadoop云计算系统软件 1）先用鼠标复制Hadoop安装包：hadoop-1.0.4.tar，然后用鼠标复制到当前目录/home/mary； 2）然后执行：tar -xzvf hadoop-1.0.4.tar.gz就开始安装了。 3．安装其他Hadoop必备软件 把jdk-6u33-linux-i586.bin复制到/home/mary下，然后命令行执行 sudo ./jdk-6u33-linux-i586.bin sudo apt-get install openjdk-6-jdk sudo apt-get install ssh sudo apt-get install openssh-server sudo apt-get install rsync 备注：如果系统提示找不到文件，则是因为刚才把这个文件拷贝到了桌面，执行这个mv Desktop/jdk-6u33-linux-i586.bin ./，则将文件移动到当前目录，再执行./jdk-6u33-linux-i586.bin，安装成功。 4.编辑主机设置文档修改系统环境配置文件 4.1编辑主机设置文档_————设置虚拟机网络连接 需要这2台虚拟机能上网（Internet），同时相互能互联，并且能够与主机互联。 设置2块网卡,如下: 设置桥接模式下的网络连接. sudo?gedit?/etc/network/interfaces?? 将eth1相关的容修改为如下配置： auto?eth1?? ?? iface?eth1?inet?static?? address?01?? netmask??? gateway?54?? 然后再重启网络服务： sudo?/etc/init.d/networking?restart?? 最后再用ifconfig和route来看看是更改过来了，再ping一下sina，看看Internet是否可用： 按照同样的方法来配置其余虚拟机即可。 网络配好了后，可以通过ssh或ping来检测是否可以相互联通。 然后打开一个Terminal， sudo gedit /etc/hosts 设置为： localhost 00 hadoop 01 hadoop1 ！！！重点参考wangchunhai.blog.51cto./225186/381225 4.2修改系统环境配置文件 sudo gedit /etc/profile，加入如下配置： export JAVA_HOME=/home/mary/jdk1.6.0_33 export JRE_HOME=/home/mary/jdk1.6.0_33/jre export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH export PATH=$HADOOP_HOME/bin:$JRE_HOME/bin:$JAVA_HOME/bin:$PATH export HADOOP_HOME=/home/mary/hadoop 5. 创建SSH密钥安全联机（免密码登录） SSH基本原理和用法 SSH之所以能够保证安全，原因在于它采用了公钥加密。过程如下： (1)远程主机收到用户的登录请求，把自己的公钥发给用户。 (2)用户使用这个公钥，将登录密码加密后，发送回来。 (3)远程主机用自己的私钥，解密登录密码，如果密码正确，就同意用户登录。 1）Master节点利用ssh-keygen命令生成一个无密码密钥对。 在Master节点上执行以下命令： ssh-keygen -t rsa -P （创建密钥） 运行后询问其保存路径时直接回车采用默认路径。 生成的密钥对：id_rsa（私钥）和id_rsa.pub（公钥），默认存储在/ho