Hadoop-0.20.2详细安装及疑难问题.doc

安装 2011年4月4日 10:13 Hadoop-0.20.2 安装使用 ? 1、Cygwin 安装 ssh ? 2、按照以下的文档配置ssh ? ? 3、几个配置文件的配置 ? 3.1、conf/core-site.xml ? property name/name valuehdfs://localhost:9000/value finaltrue/final /property property namehadoop.tmp.dir/name value/workspace/temp/hadoop/tmp/hadoop-${}/value finaltrue/final /property ? 3.2、conf/hdfs-site.xml ? property namedfs.replication/name value1/value finaltrue/final /property property name.dir/name value/workspace/temp/hadoop/data/hadoop/name/value finaltrue/final /property property namedfs.data.dir/name value/workspace/temp/hadoop/data/hadoop/data/value finaltrue/final /property ?3.3、conf/mapred-site.xml ? property namemapred.job.tracker/name valuelocalhost:9001/value finaltrue/final /property ? 3.4、conf/hadoop-env.sh ? export JAVA_HOME=D:/workspace/tools/jdk1.6 ? 4、解决启动的时候 ClassNotFound：?org.apache.hadoop.util.PlatformName ? ? 将 %hadoop_home%\bin\hadoop-config.sh中的第190行 修改为如下： ? JAVA_PLATFORM=`CLASSPATH=${CLASSPATH} ${JAVA} -Xmx32m -classpath ${HADOOP_COMMON_HOME}/hadoop-common-0.21.0.jar org.apache.hadoop.util.PlatformName | sed -e s/ /_/g` ? 5、命令 ? 登陆SSH ssh localhost 查看Hadoop版本号 bin/hadoop version 格式化一个新的文件系统 bin/hadoop namenode -format 启动Hadoop守护进程 bin/start-all.sh ? 6、创建HBase文件夹 ? bin/hadoop dfs -mkdir Hbase bin/hadoop dfs -mkdir tmp ? ? http://localhost:50070/ http://localhost:50030/ ? ? 1、修改bin/hbase-env.sh 中的 export JAVA_HOME export HBASE_MANAGES_ZK=true ? 2、将conf/hbase-default.xml文件中的内容完全复制到conf/hbase-site.xml中 ? 3、对conf/hbase-site.xml文件做如下修改： ? property ? ? namehbase.rootdir/name ? ? valuehdfs://localhost:9000/hbase/value /property property namehbase.tmp.dir/name value/workspace/temp/hadoop/tmp/hbase-${}/value descriptionTemporary directory on the local filesystem./description /property property ? ? namehbase.cluster.distributed/name ? ? valuefalse/value? ? /property property ? ? namehbase.zookeeper.quorum/name ? ? value/value? ? ??/property property nameperty.clientPort/name