Hadop集群部署详细手册.docxVIP

1、安装虚拟机 1.1、准备软件 1、VMware Workstation 12.zip 虚拟机软件 2、CentOS-6.5-x86_64-bin-DVD1.iso 64位操作系统 1.2、安装虚拟机软件 要想成功安装，务必删除掉已有的虚拟机软件 1.3、安装操作系统  运行虚拟机软件，点击软件右上角的文件，选择新建虚拟机，会弹出新建虚拟机向导页面  选择典型安装，然后点击下一步  选择客户端操作系统，务必选择“稍后安装操作系统”，然后点击下一步  选择客户端操作系统的类型为linux、版本为CentOS 64位，然后点击下一步  输入虚拟机名称，并选择虚拟机镜像文件安装的目录，然后下一步  选择磁盘大小，并选择镜像文件存储的格式，然后点击下一步  直接点击完成  完成之后，虚拟机软件的左侧会出现你配置的虚拟机名称，点击编辑虚拟机设置  根据自己的机器配置信息设置虚拟机内存大小，一般建议给2G以上  重要操作：指定虚拟机启动时的镜像文件  重要操作：指定虚拟机网络类型为NAT，如果已经NAT就忽略此步骤  配置完成之后，点击确定操作保存配置文件  启动虚拟机，选中你的虚拟机名称，在右侧的窗口点击 开启此虚拟机  直接回车，安装操作系统  使用键盘上的Tab按键，选择Skip，然后点击回车  然后一路回车，进入以下的页面，并点击Next操作  选择语言  选择键盘  选择硬盘类型  选择 yes discard any data 确定当前配置  输入hostname 主机名称  选择时区为上海  输入操作系统的密码为8个1  输入密码之后，点击下一步，会提示密码过于简单，是否使用，选择使用  选择替换已经存在的系统  将以上配置信息写入到磁盘  选择服务器类型为Basic Server  服务器会自动安装，安装完成之后点击reboot按钮即可 1.4、配置linux的网卡  新安装的操作系统，既是使用了桥接的方式，也不一定能够上网，因为每个人的网络环境并非一样的。所以如果你在使用ping 命令，可能会碰到一下的错误：     1）ping域名的时候出现ping:unknown host  xxx.xxx     2）ping域名的时候出现connect: network is unreachable 的问题     以上两种问题的出现，一般都是ip地址没有配置好。 下图的是常用网卡配置的参数     配置网卡有几种方式，可以自行百度下，本文是修改网卡的配置文件。     配置文件名称：vi /etc/sysconfig/network-scripts/ifcfg-eth0 配置完毕之后，重启网卡 service network restart      1.5、准备三个虚拟机搭建Hadoop集群 重复步骤1.3和1.4的操作，完成三个虚拟机的安装。 1.6、配置集群Hosts    所有的虚拟机上都需要配置hosts          vi  /etc/hosts             28 storm01 zk01 hadoop01             29 storm02 zk02 hadoop02             30 storm03 zk03 hadoop03 Scp /etc/hosts hadoop02:/etc/ Scp /etc/hosts hadoop03:/etc/ 1.7、服务器间免密码登录[必选] Hadoop01上 配置免密码登陆，在所有机器上执行以下命令     ssh-keygen -t rsa （四个回车）      执行完这个命令后，会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥）      将公钥拷贝到要免密登陆的目标机器上      ssh-copy-id {其他机器的hostname}   1.8、关闭服务器的防火墙 （1） 重启后永久性生效： 开启：chkconfig iptables on 关闭：chkconfig iptables off （2） 即时生效，重启后失效： 开启：service iptables start 关闭：service iptables stop 1.9、创建服务器上的统一工作目录 mkdir /export mkdir /export/servers mkdir /export/software/ chmod 755 -R /export 2、配置JDK 2.1、查看当前系统上是否安装了JDK     进入一个新的系统，一般来讲是没有安装过JDK的。但是有些linux的版本会默认安装openJDK。open JDK