Centos7安装和配置hadoop2.7.3的流程和总结.pdfVIP

CentOS7 安装完整流程及总结 一、前言 配置一台 master 服务器，两台（或多台） slave 服务器， master 可以无密码 SSH登录到 slave 。卸载 centos7 自带的 openjdk, 通过 SecureCRT 的 rz 命令上传文件到服务器 , 解压安装 JDK，解压安装 Hadoop，配置 hadoop 的、、、文件。配置好之后启动 hadoope 服务， 用 jps 命令查看状态。再运行 hadoop 自带的 wordcount 程序做一个 Hello World 实例。 二、准备工作 我的系统： windows 10 家庭普通中文版 cpu:intel i5 内存：8G 64 位操作系统 需要准备的软件和文件（全部是 64 位安装包） 1. 虚拟机： VMware 12 Pro 官网下载： 选择 DVD ISO(标准版 ) 及 以上，官网下载： 下载地址： version 三、安装过程 提示：先创建一台虚拟机 , 安装好 centos7 系统，使用 VMware的克 隆功能，克隆另外两台虚拟机。这样可以节省时间。 虚拟机设置 当三台虚拟机安装好之后， 获得它们的 IP 地址 , 并设置主机名，（根 据实际 IP 地址和主机名）修改 /etc/hosts 文件内容为： 1、vi /etc/hosts 命令修改，然后保存（ vi 的相关命令见引用来 源 16） 2、more /etc/hosts 查看 3、重启后， hosts 生效。命令： reboot now SSH 免密码登录 提示：我全程用的都是 root 用户，没有另外创建用户。每台服务器 都生成公钥，再合并到 authorized_keys 。 1) CentOS默认没有启动 ssh 无密登录，去掉 /etc/ssh/sshd_config 其中 2 行的注释，每台服务器都要设置， 2) #RSAAuthentication yes 3) #PubkeyAuthentication yes 4) 输入命令， ssh-keygen -t rsa ，生成 key ，都不输入密码，一直 回车，/root 就会生成 .ssh 文件夹，每台服务器都要设置， 5) 合并公钥到 authorized_keys 文件，在 master 服务器，进入 /root/.ssh 目录，通过 SSH命令合并，（~/.ssh/ 是省略的写法， 要根据实际路径来确定） 6) cat authorized_keys 7) ssh cat ~/.ssh/ authorized_keys 8) ssh. cat ~/.ssh/ authorized_keys 9) 把 master 服务器的 authorized_keys 、known_hosts 复制到 slave 服务器的 /root/.ssh 目录 scp -r /root/.ssh/authorized_keys:/root/.ssh/ scp -r /root/.ssh/known_hosts:/root/.ssh/ scp -r /root/.ssh/authorized_keys:/root/.ssh/ scp -r /root/.ssh/known_hosts:/root/.ssh/ 10) 完成后， ssh 、ssh 或者 (ssh 、ssh ) 就不需要输入密码直接登录 到其他节点上。 Secure CRT 连接虚拟机 1、在 VMware中