Hadoop云平台搭建指南.docVIP

Hadoop云平台搭建指南 安装ubuntuubuntu-13.10-desktop-amd64，安装过程省略。。。 在Ubuntu下创建hadoop用户组和用户创建hadoop用户组;如图： 创建hadoop用户;–ingroup hadoop hadoop 如图： 给hadoop用户添加权限，打开/etc/sudoers文件;按回车键后就会打开/etc/sudoers文件了，给hadoop用户赋予root用户同样的权限。在root ??ALL=(ALL:ALL) ??ALL下添hadoop ??ALL=(ALL:ALL) ?ALL， 如图： 在Ubuntu下安装JDK使用如下命令执行即可：如图： 输入大写的Y就在线安装java运行环境成功了。 配置JAVA环境变量:在其中添加如下两行：JAVA_HOME=/usr/lib/jvm/java-1.6.0-openjdk-amd64CLASSPATH=.:/usr/lib/jvm/ java-1.6.0-openjdk-amd64//jre/lib sudo gedit /etc/profile 在末尾加上： JAVA_HOME=/usr/lib/jvm/java-1.6.0-openjdk-amd64 export JRE_HOME=/usr/lib/jvm/java-1.6.0-openjdk-amd64/jre export CLASSPATH=.:/usr/lib/jvm/ java-1.6.0-openjdk-amd64//jre/lib export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$HOME/bin 在配置环境变量时，特别要注意路径的配置，安装好JDK后，就查询各个文件夹在那个位置。 java -version查看不出错说明，成功。修改机器名 （这步骤可以省略）每当ubuntu安装成功时，我们的机器名都默认为：ubuntu ，但为了以后集群中能够容易分辨各台服务器，需要给每台机器取个不同的名字。机器名由 /etc/hostname文件决定。 打开/etc/hostname文件;/etc/hostname 改成想要改的名字。 安装ssh服务安装openssh-server六建立ssh无密码登录本机首先要转换成hadoop用户，执行以下命令：– hadoop 如图： ssh生成密钥有rsa和dsa两种生成方式，默认情况下采用rsa方式。创建ssh-key，，这里我们采用rsa方式;Ssh-kengen –t rsa –P “” 如图： （注：回车后会在~/.ssh/下生成两个文件：id_rsa和id_rsa.pub这两个文件是成对出现的）进入~/.ssh/目录下，将id_rsa.pub追加到authorized_keys授权文件中，开始是没有authorized_keys文件的;cd ~/.ssh cat id-rsa.pub authorized_keys 如图： （完成后就可以无密码登录本机了。）登录localhost; ( 注：当ssh远程登录到其它机器后，现在你控制的是远程的机器，需要执行退出命令才能重新控制本地主机。)执行退出命令;安装hadoop采用的hadoop版本是：hadoop-0.20.203假设hadoop-0.20.203.tar.gz在桌面，将它复制到安装目录 /usr/local/下；解压hadoop-0.20.203.tar.gz；–zxf hadoop-rc1.tar.gz 将解压出的文件夹改名为hadoop;sudo?mv?hadoop- hadoop 将该hadoop文件夹的属主用户设为hadoopsudo?chown?-R hadoop:hadoop hadoop 打开hadoop/conf/hadoop-env.sh文件;sudo?gedit hadoop/conf/hadoop-env.sh 配置conf/hadoop-env.sh（找到#export JAVA_HOME=...,去掉#，然后加上本机jdk的路径）;export JAVA_HOME=/usr/lib/jvm/ java-1.6.0-openjdk-amd64 打开conf/core-site.xml文件;sudo?gedit hadoop/conf/core-site.xml 编辑如下：property后面需要手工敲打开conf/mapred-site.xml文件