ubuntu上hadoop安装及配置.docxVIP

安装VMware虚拟机，在其中安装三台Ubuntu10.10maverick系统的机器，其中VMware

自动为三台机器配好了本地IP。网络设置为NAT方式。

node1:

用户名：root,

密码：root.

IP:31

node2:

用户名：root,

密码：root.

IP:29

node3:

用户名：root,

密码：root.

IP:33

修改hosts

加入gedit/etc/hosts

加入

31 node1

node2

node3

编辑每个主机的hostname

vi /etc/hostnamenode1:node1node2:node2node3:node3

安装jdk

在oracle官网下载jdk1.7.0_02，放在home目录。

1)

1)解压压缩包

mkdir /usr/java

cp ~/jdk-7u2-linux-i586.tar.gz /usr/java/cd /usr/java/

2)编辑

2)编辑/etc/profile

gedit/etc/profile

在最后加入

在最后加入:

exportJAVA_HOME=/usr/java/jdk1.7.0_02exportJRE_HOME=/usr/java/jdk1.7.0_02/jre

3)重新启动

3)重新启动Ubuntu

安装ssh

apt-getinstallssh-server

apt-getinstallssh-server

配置无密码登录

node1:

ssh-keygen-trsacd.ssh

catid_rsa.pubauthorized_keys(实现无密码登录本机)

node2:

ssh-keygen-trsacd.ssh

catid_rsa.pubauthorized_keys(实现无密码登录本机)

scp node1:/root/.ssh/id_rsa.pub ~/

cat ~/id_rsa.pub ~/.ssh/authorized_keys(实现node1无密码登录node2)

node2:

ssh-keygen-trsacd.ssh

catid_rsa.pubauthorized_keys(实现无密码登录本机)

scp node1:/root/.ssh/id_rsa.pub ~/

下载hadoop-1.0.0.tar.gz解压到/home/hadoop把Hadoop的安装路径添加到环/etc/profile中

下载hadoop-1.0.0.tar.gz

解压到/home/hadoop

把Hadoop的安装路径添加到环/etc/profile中:

exportHADOOP_HOME=/home/hadoop/hadoop-1.0.0exportPATH=$HADOOP_HOME/bin:$PATH

Hadoop的主要配置都在hadoop-1.0.0/conf下。

Hadoop的主要配置都在hadoop-1.0.0/conf下。

在conf/hadoop-env.sh中配置Java环境

exportJAVA_HOME=/usr/java/jdk1.7.0_02

配置

配置conf/masters和conf/slaves文件

(1)

(1)在namenode中：

Mastersnode1Slavesnode1node2node3

(2)在datanode中Masters

(2)在datanode中

hadoop/hadoop1.0.0/conf/core-site.xml:

hadoop/hadoop1.0.0/conf/core-site.xml:

?xmlversion=1.0?

?xml-stylesheettype=text/xslhref=configuration.xsl?

!--Putsite-specificpropertyoverridesinthisfile.--

configuration

property

namehadoop.tmp.dir/name

value/app/hadoop/tmp/value

descriptionAbaseforothertemporarydirectories./description

/property

property

name/name

valuehdfs://node1:54310/value

descriptionThenameofthedefaultfilesystem. AURIwho