hadoop虚拟机安装文档.docxVIP

hadoop虚拟机安装文档 创建虚拟机母版hadoop，安装ubuntu-server操作系统并安装ssh服务，设置用户名密码为hadoop 安装成功后关闭hadoop机器 使用虚拟机软件的克隆功能，对hadoop进行克隆，克隆出master、slave1、slave2、slave3 用hadoop用户名密码登录进入master虚拟机，启动 修改ssh配置 修改如下配置，并保存退出（编辑器执行:wq） 修改hostname 修改为对应的主机名，例如 修改hosts文件（查看机器ip的命令为ifconfig） 给root用户增加密码password 重启该机器 执行命令 sudo reboot 再每一台机器上重复执行上述5-9步骤 安装xshell和xftp 在xshell中新建上述4台机器的ip进行连接，以用户root登录 验证主机名是否修改，查看4台机器的如下方位 进行ssh免登录配置 在每台机子上执行如下命令（使用xshell的全部会话功能） 提示yes or no 输入yes 在每台机子打开如下文件夹 在每台机子当前文件夹下执行如下命令生成密钥 ssh-keygen?-t?dsa?-P??-f?~/.ssh/id_dsa 在master机子上执行：cat id_dsa.pub ?authorized_keys 在slave1执行：scp id_dsa.pub master:/root/.ssh/id_dsa.pub.s1 在slave2执行：scp id_dsa.pub master:/root/.ssh/id_dsa.pub.s2 在slave3执行：scp id_dsa.pub master:/root/.ssh/id_dsa.pub.s3 （执行14-5,6,7步时根据提示输入密码） 在master机子执行： cat id_dsa.pub.s1 authorized_keys cat id_dsa.pub.s2 authorized_keys cat id_dsa.pub.s3 authorized_keys 查看authorized_keys文件内容 将authorized_keys复制到其他机器上 scp authorized_keys slave1:/root/.ssh/ scp authorized_keys slave2:/root/.ssh/ scp authorized_keys slave3:/root/.ssh/ 验证免登陆 在master机器上执行：ssh slave1连接slave1（首次连接会有提示，直接输入yes）  进入opt目录下安装hadoop和jdk 选择xftp上传tar包 拉取tar包进入master机器 解压安装包，依次执行如下命令 tar -xvf hadoop-2.6.0-cdh5.5.0.tar.gz tar -xvf jdk-7u79-linux-x64.gz mv hadoop-2.6.0-cdh5.5.0.tar.gz hadoop mv jdk-7u79-linux-x64.gz jdk 修改环境变量 在最下方填入如下内容 export JAVA_HOME=/opt/jdk/ export CLASS_PATH=$JAVA_HOME/lib:$JAVA_HOME/jre/lib export PATH=$PATH:$JAVA_HOME/bin 保存退出后执行命令 执行java -version查看jdk是否安装成功 hadoop安装 在每台机器上执行命令 mkdir -p /var/data/hadoop/hdfs/nn mkdir -p /var/data/hadoop/hdfs/snn mkdir -p /var/data/hadoop/hdfs/dn mkdir -p /opt/hadoop/logs 进入hadoop配置文件目录 配置core-site.xml #vim core-site.xml 添加如下配置： configuration property name/name valuehdfs://master:9000/value /property property namehadoop.http.staticuser.user/name valuehdfs/value /property property namehadoop.tmp.dir/name value/hadoop/tmp/value descriptionA base for other temporary directories./description /property /configuration 配