hadoop2.6编译安装-新.docxVIP

1 编译Hadoop2.6 64bit 1.1 运行环境说明 1.1.1硬软件环境 ? 主机操作系统：Windows 64 bit，双核4线程，主频3.3G，8G内存 ? 虚拟软件：VirtualBox ? 虚拟机操作系统：CentOS 6.6 64位，单核，1G内存 ? JDK：1.7.0_55 64位 ? Hadoop：Release 2.6.0 source 1.1.2集群网络环境 集群只包含一个节点，设置IP地址为1。 1.2 环境搭建 1.2.1JDK安装和Java环境变量配置 1. 下载JDK1.7 64bit安装包 打开JDK1.7 64bit安装包下载链接为： /technetwork/java/javase/downloads/jdk7-downloads-1880260.html 打开界面之后，先选中 Accept License Agreement ，然后下载 jdk-7u55-linux-x64.tar.gz，如下图所示： 2. 赋予hadoop用户/usr/lib/java目录可读写权限，使用命令如下： sudo chmod -R 777 /usr/lib/java 3. 把下载的安装包，使用ssh工具上传到/usr/lib/java 目录下，使用如下命令进行解压 tar -zxvf jdk-7u55-linux-x64.tar.gz 解压后目录如下图所示： 4. 使用root用户配置 /etc/profile，该设置对所有用户均生效 vi /etc/profile export JAVA_HOME=/usr/lib/java/jdk1.7.0_55 export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar 5. 重新登录并验证 logout java -version 1.2.2安装并设置maven 1. 下载maven安装包，建议安装3.0以上版本，本次安装选择的是maven3.0.5的二进制包，下载地址如下 /apache/maven/maven-3/ 2. 使用ssh工具把maven包上传到/home/hadoop/Downloads目录 3. 解压缩apache-maven-3.0.5-bin.tar.gz包 tar -zxvf apache-maven-3.0.5-bin.tar.gz 4. 把apache-maven-3.0.5目录移到/usr/local目录下 sudo mv apache-maven-3.0.5 /usr/local 5. 在/etc/profile配置文件中加入如下设置 export PATH=$JAVA_HOME/bin:/usr/local/apache-maven-3.0.5/bin:$PATH 6. 编辑/etc/profile文件并验证配置是否成功: source /etc/profile mvn -version 1.2.3以root用户使用yum安装svn yum install svn 1.2.4以root用户使用yum安装autoconf automake libtool cmake yum install autoconf automake libtool cmake 1.2.5以root用户使用yum安装ncurses-devel yum install ncurses-devel 1.2.6以root用户使用yum安装openssl-devel yum install openssl-devel 1.2.7以root用户使用yum安装gcc* yum install gcc* 1.2.8安装并设置protobuf 注：该程序包需要在gcc安装完毕后才能安装，否则提示无法找到gcc编译器。 1. 下载protobuf安装包 下载链接为： /p/protobuf/downloads/list 2. 使用ssh工具把protobuf-2.5.0.tar.gz包上传到/home/hadoop/Downloads目录 3. 解压安装包 tar -zxvf protobuf-2.5.0.tar.gz 4. 把protobuf-2.5.0目录转移到/usr/local目录下 sudo mv protobuf-2.5.0 /usr/local 5. 进行目录运行命令 进入目录以root用户运行如下命令： ./configure make make check make install 6. 验证是否安装成功 运行成功之后，通过如下方式来验证是否安装成功 protoc 1.3 编译Hadoop 1.3.1下载Hadoo