hadoop完全分布式搭建wp.pdfVIP

hadoop完整散布式搭建wp.

hadoop完整散布式搭建详解

先期准备：

准备需要的软件（环境）。

为最稳固版本之一，利于学习时使用。

hadoop由java语言开发需要java环境，一定安装jdk。

使用redHat与vmwareWorkStation搭建虚构机环境。

使用scrt71-x64多客户端远程登岸服务器。

winscp424可视化界面windows与linux的文件操作。

配置虚构机：

解压安装redHat与vmwareWorkStation。

使用Mware翻开redHat，选择对应目录的文件，以以下图：

启动虚构机，以以下图：

虚构机基础配置

1/10

hadoop完整散布式搭建wp.

改正Network为NAT方式登录虚构机，防备ip动向变化。

配置网卡信息，使用eth0为我们的第一张网卡。

删除本来的eth0，改正下边的eth1为eth0，复制下边椭圆中的mac地点，配置ip时使用。

配置静态ip，重启虚构机时ip不改动。

2/10

hadoop完整散布式搭建wp.

注意：依据对应的ip网段改正红框里面信息（我的是），HWADDR为我们方才复制的mac

重启网络服务

查察ip与网卡，我们发现网卡仍是eth1，可是ip地点发生了改变。

更新网卡信息，使用reboot。我们这里就不给大家截图了，网卡一定是变为eth0了。

先封闭目前系统防火墙，使用root才行。

配置完整封闭防火墙，重启不开启。

查察防火墙信息，此刻是init5，启动时所有关掉吧

设置防火墙开机为自动封闭。

安装jdk、hadoop并配置环境变量。

使用winscp在/usr目录下创立hadoop目录并导入，以下图两个文件

3/10

hadoop完整散布式搭建wp.

这里注意说明一点，请选择二进制形式传文件，查察文件，注意配置权限，不然履行不了。

开始解压

复制此目录准备配置环境变量

配置以以下图红框内，后边的为hadoop的环境变量，注意：等于windows下的;

考证配置成功，注意需要source激活环境变量

解压hadoop，环境变量已经配置成功

1.创立主机名、hadoop账号和无密钥ssh登岸。

创立主机名

改正主机名

4/10

hadoop完整散布式搭建wp.

创立hadoop账号

所有权交给hadoop账号

排除红框里面的三行说明

重启服务

创立私钥，，这里使用rsa加密方式你也能够是使用dsa这类方式。（切换hadoop用户）

复制这个新创立出来的私钥

注意：(这里相当重要，不改正权限，无密码登岸将不会成功.这个公钥考证文件只好私有为自己操作

5/10

hadoop完整散布式搭建wp.

配置hadoop配置文件

改正此文件导入jdkpath由于hadoop运转需要jdk环境

hadoop集群环境：