hadoop-1.2.1 linux环境配置.docxVIP

在ubuntu13.10环境中配置hadoop安装jdk一.下载jdk-8u25-linux-x64.tar.gz去oracle官网下载二.解压找到安装包的目录使用命令解压tar?-zxvf?jdk-8u25-linux-x64.tar.gz三.环境变量的配置$ gedit ~/.bashrc在末尾加上export JAVA_HOME=/usr/local/java/jdk1.8.0_25 export JRE_HOME=${JAVA_HOME}/jreexport CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib export PATH=${JAVA_HOME}/bin:$PATH安装ecplise一.下载ecplise /downloads/?osType=linuxrelease=undefined二.解压ecplise用tar -zxvf 文件名.tar.gz 解压解压完成后就可以在相应文件夹中看到ecplise了由于ubuntu 13.10 有关于ecplise的bug导致ecplise的菜单无法弹出，我们可以用命令打开ecplise来避免这种情况。命令：env UBUNTU_MENUPROXY= /home/ghd/eclipse/eclipse安装hadoop安装ssh$ sudo?apt-get?install?openssh-server???配置ssh面密码登录$?ssh-keygen?-t?dsa?-P??-f?~/.ssh/id_dsa???$?cat?~/.ssh/id_dsa.pub??~/.ssh/authorized_keys下载配置hadoop-1.2.1下载hadoop-1.2.1.tar.gz修改权限使用chown?hadoop?hadoop-1.2.1.tar.gz命令修改权限解压在hadoop安装目录下加使用解压命令tar?-zxvf?hadoop-1.2.1.tar.gz配置hadoop文件配置hadoop-env.sh，指定jdk的安装路径其中/home/ghd/jdk1..0_25是JDK的路径，把前面的#删掉。二.修改hadoop的核心配置文件core-site.xml，配置namenode的地址和端口代码：configuration property name/name valuehdfs://localhost:9000/value /property /configuration property namehadoop.tmp.dir/name value/home/ruge/hadoop/hadooptmpdir/value descriptionA base for other temporary directories./description /property 修改hadoop的hdfs-site.xml，配置replication，即数据保存份数代码： property namedfs.replication/name value1/value /property 修改hadoop的mapred-site.xml，配置jobtracker的地址和端口代码： property namemapred.job.tracker/name valuelocalhost:9001/value /property 格式化hadoop的文件系统HDFSCD到hadoop的安装目录下 /bin hadoop namenod –format启动hadoopbin/start-all.sh检查hadoop是否启动成功NameNode?-?http://localhost:50070/JobTracker?-?http://localhost:50030/NamenodeJobtracker在ecplise运行wordcount一.插件安装在ecplise中使用hadoop需要相关的插件,我们先去下载一个!hadoop-1.2.1版本的插件可以去这里下载/detail/hanyongan300/6238153下载好后将插件复制到ecplise安装目录下的plugin文件中，重启ecplise.重启之后File-New-Project,如果出现MapReduce Project 选项,则说明插件安装成功!二.环境