安装配置说明.docxVIP

请同学们先安装好VMware（安装包链接在QQ群中），再进行如下的安装及配置。 目前已经将上课所需用到的环境打包成 4 个虚拟机，同学们只需按步骤导入及配置即可正常使用。 注意1：当启动虚拟机后, 如果弹出窗口选择“我已复制虚拟机”或“我已移动虚拟机”，请选择“我已移动虚拟机” 注意2：后面的实验需要JDK1.8 注意3: 文件夹名中尽量不要有中文和空格 一、虚拟机导入 解压缩 master 压缩包和另外 3 个 slave 压缩包。打开 VMware，接下来按照图片进行操作。 继上一步【打开】后，找到解压缩的 master 目录下，选中后点击【打开】。 4 台虚拟机的导入操作类似，全部导入后如下图所示。 二、IP 地址等信息确认 开启虚拟机，主节点为 master，3 台从节点：slave1、slave2 和 slave3。用户名和密码均如下： 用户名：root 密码：123456 注意：当启动虚拟机后, 如果弹出窗口选择“我已复制虚拟机”或“我已移动虚拟机”，请选择“我已移动虚拟机” 1. 虚拟机 ip 信息 ①开启虚拟机，输入命令“ifconfig -a”，将查看到的 eth 和 HWaddr 后面的内容保存下来； ②进入“/etc/sysconfig/network-scripts/ifcfg-eth0”文件，确认一下其中的DEVICE、HWADDR 中的值与上一步查看到的内容是否一致，确认 IPADDR 后面的 IP； ③确认“/etc/sysconfig/network”的主机名； ④输入命令“service network restart”重启网络服务； ⑤reboot 重启虚拟机。 在完成master节点后，同样的操作步骤，处理三台slave 2. 在本地电脑添加映射 在 Windows 下 C:\Windows\System32\drivers\etc\hosts 添加 IP 映射。 30 master 30 master 31 slave1 32 slave2 33 slave3 三、修改虚拟网络编辑器设置 导入完成后打开【编辑】中的【虚拟网络编辑器】，修改相关设置。 修改 VMnet8 的子网 IP、子网掩码、NAT 设置和 DHCP 设置，如下图所示。 四、Centos 镜像路径修改 右击虚拟机，接着打开设置。 将下图中红色箭头所指的路径修改成自己本地电脑的路径（即从QQ群里下载的“课程提供的虚拟机”文件夹中的那个“CentOS-6.8-x86_64-bin-DVD1.iso”）。之后虚拟机重启使用。 重启虚拟机后，在master执行如下命令，重新挂载镜像 【 yum clean all 】 【 mount?/dev/dvd?/media/ 】 （注意：/dev/dvd / 这里dvd后面有一个空格） 其他的三台SLAVE也是同样的处理步骤 四台机器的用户名和密码相同，如下： 用户名：root 密码：123456 五、目前虚拟机中安装的组件 hadoop2.6.5 Hive1.2.1 zookeeper3.4.6 HBase1.3.6 Scala2.11.5 flume1.9.0 spark2.4.0 kafka2.3.1 flink1.10.1 storm2.1.0 ElasticSearch7.4.2 kibana ik sqoop1.4.6 六、XSHELL安装 请安装(QQ群中下载)，并对虚拟机中的四台机器进行连接，四台机器的用户名和密码相同， 用户名：root 密码：123456 30 30 master 31 slave1 32 slave2 33 slave3 七、测试Hadoop集群是否安装成功 四台虚拟机都需要开启，master是namenode，三台slave是datanode，这才是一个完整的集群 在master主节点执行命令【hadoop_cluster start】可快速启动 Hadoop 集群。如下： [root@master ~]# hadoop_cluster start 启动后，分别在master节点和3个slave节点输入jps命令，查看当前进程 Master节点的进程如下： 3个slave的进程如下： 再通过浏览器查看（即 可以通过浏览器查看HDFS上的目录和文件） http://master:50070/dfshealth.jsp （这个URL请放在浏览器的收藏夹中，我们会经常使用） 结果如下： 2. 关闭 在主节点执行命令【hadoop_cluster stop】可快速关闭 Hadoop 集群。