Hadoop完全分布式搭建.pdfVIP

安徽工商职业学院 1+X 大数据培训 完全分布式搭建 过程分析： 1） 准备3台虚拟机（关闭防火墙、静态ip、主机名称） 2） 配置ssh 3）解压 JDK、Hadoop 4）配置环境变量 5）Hadoop文件参数配置 6）hadoop集群运行 集群规划： 8 9 0 Master Slave1 Slave2 HDFS NameNode DataNode DataNode SecondaryNameNode YARN NodeManager NodeManager ResourceManager 一、初始准备工作 查看主机的 IP地址 [root@localhost ~]# ip a 修改IP 地址 [root@localhost ~]#vi /etc/sysconfig/network-scripts/ifcfg-ens33 地址分配模式：BOOTPROTO=static (改为static 静态获取IP 地址) 是否启动：ONBOOT=yes (开机自启网卡设为yes) IP 地址：IPADDR=8 (要配置的IP 地址) 子网掩码：NETMASK= (PREFIX=24) 网关地址：GATEWAY= (网关) DNS 地址：DNS1= (DNS,可以填网关或 14) （注：此处 IP应为网段，图片只是配图） 安徽工商职业学院 1+X 大数据培训 设置主机名称： [root@localhost ~]# hostnamectl set-hostname master 设置完后退出当前用户，重新登陆查看当前服务器的名称，结果为 master。 [root@ master ~]# hostname master 关闭防火墙：（三台主机都要关闭） [root@master ~]# systemctl stop firewalld Linux 系统如果重启，防火墙仍然会重新启动。执行如下命令可以永久关闭防火墙。 [root@master ~]# systemctl disable firewalld 关闭防火墙后要查看防火墙的状态，确认一下。 [root@master ~]# systemctl status firewalld ● firewalld.service - firewalld - dynamic firewall daemon Loaded: loaded (/usr/lib/systemd/system/firewalld.service; disabled; vendor preset: enabled) Active: inactive (dead) Dec 01 07:12:33 master systemd[1]: Stopped firewalld - dynamic firewall daemon. 配置hosts 映射文件： 可以将主机名称与 IP 地址绑定，这样就可以通过主机名来访问主机，方便记忆。同时在后 面的配置文件中也可以用主机名来代替 IP 地址表示主机，当 IP 地址改变时，只要修改 主机名与 IP 地址的绑定文件，不用在多个配置文件中去修改。主机名与 IP 地址的绑定 文件是本地名字解析文件 hosts