编译Hadoop安装教程.pdfVIP

编译Hadoop 源代码生成安装包 编译环境： CentOS 7.4 x86_64 jdk-8u172-linux-x64.tar.gz maven3.5.3 protocbuf 2.5.0 网络环境 特别提醒：网络速度不能太慢，要求顺畅！ 编译前准备： 1.操作系统: 本文档测试的CentOS 7.4，已经安装了所有的软件包 额外需要安装如下的软件包： yum -y install gcc gcc-c++ ncurses ncurses-devel bison libgcrypt perl make cmake cmake-gui yum -y install svn ncurses-devel gcc* yum -y install lzo-devel zlib-devel autoconf automake libtool cmake openssl-devel yum -y groupinstall “Development Tools” 2 安装Java 8 环境 下载Java 8SE jdk-8u172-linux-x64.tar.gz 安装Java 8SE cd /root/Desktop/1 #该目录是介质所在目录 tar xvfz jdk-8u172-linux-x64.tar.gz -C /usr ln -s /usr/jdk1.8.0_172 /usr/jdk cat /etc/profileEOF JAVA_HOME=/usr/jdk export JAVA_HOME PATH=\$JAVA_HOME/bin:\$PATH export PATH EOF JAVA_HOME=/usr/jdk export JAVA_HOME CLASSPATH=.:$JAVA_HOME/lib:$CLASSPATH export CLASSPATH PATH=$JAVA_HOME/bin:$PATH export PATH 3 安装maven 下载：apache-maven-3.5.3-bin.tar.gz 安装： cd /root/Desktop/1 #该目录是介质所在目录 tar xvfz apache-maven-3.5.3-bin.tar.gz -C /usr mv /usr/apache-maven-3.5.3 /usr/maven MAVEN_HOME=/usr/maven export MAVEN_HOME PATH=/usr/maven/bin:$PATH export PATH 检查安装是否正确 mvn -version 4 安装protobuf 下载地址： /files/protobuf-2.5.0.tar.gz 安装： cd /root/Desktop/1 #该目录是介质所在目录 tar xvfz protobuf-2.5.0.tar.gz -C /usr cd /usr/protobuf-2.5.0 ./configure make make check make install 检查安装是否正确(如果能正确显示版本号,则说明安装正确) protoc --version 编译Hadoop 编译Hadoop 2.7.3 下载hadoop 2.7.3 源码， /releases.html 解压缩源代码 cd /root/Desktop/1 #该目录是介质所在目录 tar xvfz hadoop-2.7.3-src.tar.gz -C /usr 在hadoop 源码目录下进行编译： cd /usr/hadoop-2.7.3-src mvn package -Pdist,native -DskipTests -Dtar -e -X 直到最后出现BUILD SUCCESS ，说明编译成功。 编译成功后HADOOP 安装包的位置 源码目录下 hadoop-dist/target/hadoop-2.7.3.tar.gz cd hadoop-dist/target/ ls 编译Hadoop 2.7.6 下载hadoop 2.7.6 源码， /releases.html 解压缩源代码 cd /root/Desktop/1 #该目录是介质所在目录 tar xvfz hadoop-2.7.6-src.tar.gz -C