hadoop单机安装分析和总结.docx

Hadoop单机安装配置过程：

首先安装JDK，必须是sun公司的jdk，最好1.6版本以上。

最后java–version查看成功与否。

exportJAVA_HOME=/usr/local/jdk1.6.0_17exportPATH=$JAVA_HOME/bin:$JAVA_HOME/jre:$PATHexportCLASSPATH=$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar注意配置

exportJAVA_HOME=/usr/local/jdk1.6.0_17

exportPATH=$JAVA_HOME/bin:$JAVA_HOME/jre:$PATH

exportCLASSPATH=$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar

安装ssh，免密码登陆。

apt-get

apt-getinstallopenssh-server安装ssh

建立SSHKEY：

$ssh-keygen-trsa-P（注意不要多加空格或缺少空格）

中途需要安装者选择保存密钥的文件，按回车使用默认的文件就可以了：

Enterfileinwhichtosavethekey(/root/.ssh/id_rsa):（按回车）

启用SSHKEY:

$cat/root/.ssh/id_rsa.pub/root/.ssh/authorized_keys

/etc/init.d/sshreload

reloadssh

sshlocalhost

安装配置单机hadoop

解压到/opt/hadoop

$tarzxvfhadoop-

$tarzxvfhadoop-0.20.2.tar.gz

$sudomvhadoop-0.20.2/opt/

$sudochown-Rhadoop:hadoop/opt/hadoop-0.20.2

$sudoln-sf/opt/hadoop-0.20.2/opt/hadoop

配置hadoop-env.sh

1）在hadoop/conf里面hadoop-env.sh增加

exportJAVA_HOME=/usr/jdk1.6.0

exportJAVA_HOME=/usr/jdk8

exportHADOOP_HOME=/opt/hadoop

exportPATH=$PATH:/opt/hadoop/bin

配置文件

編輯/opt/hadoop/conf/core-site.xml

configurationpropertynamefs.default

configuration

property

name/name

valuehdfs://localhost:9000/value

/property

property

namehadoop.tmp.dir/name

value/tmp/hadoop/hadoop-${}/value

/property

/configuration

編輯/opt/hadoop/conf/hdfs-site.xml

configurationpropertynamedfs.replication/namevalue

configuration

property

namedfs.replication/name

value1/value

/property

/configuration

編輯/opt/hadoop/conf/mapred-site.xml

configurationpropertynamemapred.job.tracker/namevaluelocalhost:

configuration

property

namemapred.job.tracker/name

valuelocalhost:9001/value

/property

/configuration

格式化hdfs

Java代码

1.$

cd/opt/hadoop

2.$

sourceconf/hadoop-env.sh

3.$

hadoopnamenode-format

提示信息一大堆...

启动hadoop

1.$sudo./start-all.sh//

1.$sudo./start-all.sh//在hadoop/bin下执行

完成后的测试

Java代码

http://localhost:50030/-Hadoop管理接口

启动

[hadoop@hadoop00~]$~/hadoop-0.21.0/bin/start-all.sh

Thisscr