开源大数据平台部署方案.docx

开源大数据平台部署方案环境配置主机地址主机地址用户名密码4rootcloud4c5rootcloud4c6rootcloud4c7rootcloud4c8rootcloud4c查看服务器硬件环境信息查看CPU型号：cat /proc/cpuinfo | grep name | cut -f2 -d: | uniq –c查看物理CPU颗数：cat /proc/cpuinfo | grep physical | uniq –c四颗一核的CPU查看CPU运行模式：getconf LONG_BIT查看CPU是否支持64位：cat /proc/cpuinfo | grep flags | grep lm | wc?–l结果大于0, 说明支持64bit计算. lm指long mode, 支持lm则是64bit查看操作系统版本和内核查看操作系统版本：cat /etc/issue或者lsb_release -a查看内核信息：关闭防火墙和SELinex关闭防火墙：service iptables stop（临时关闭）chkconfig iptables off（重启后生效）关闭SELINUX，SELinux功能是一种强制存取控制的实现，能够进一步的增强Linux系统的安全性，但是开启此项功能会给初学者带来很多的不便，大多都关闭此项功能setenforce 0 （临时生效）修改 /etc/selinux/config 下的 SELINUX=disabled （重启后永久生效）所有主机时间同步查看目前主机时间：date修改时间：date -s 00:00:00时间同步(主机)，将4的本地时钟作为时间供给源，这样，即便它失去网络连接，它也可以继续为网络提供服务yum install ntpvi /etc/ntp.confserver fudge stratum 10重新启动服务service ntpd stopservice ntpd start其他机器同步，等待大概五分钟，再到其他机上同步该机器时间（先确保时区一样，否则同步以后时间也是有时区差的）ntpdate 4date查看时间是否同步完成安装JDK查看Linux自带的JDK是否已安装：java –version获得如下信息，表明有自带JDK需要卸载查看jdk的信息：rpm -qa|grep java卸载自带的jdk：rpm -e --nodeps java-1.7.0-openjdk-5-.el6.x86_64rpm -e --nodeps java-1.6.0-openjdk--3.0.el6.x86_64解压安装新的Oracle JDK，将jdk-7u79-linux-x64.tar.gz放在/usr/local目录下，解压tar -zxvf jdk-7u79-linux-x64.tar.gz配置环境变量vi /etc/profileexport JAVA_HOME=/usr/local/jdk1.7.0_79export PATH=$PATH:$JAVA_HOME/bin:export CLASS_PATH=.:%JAVA_HOME%/lib/dt.jar:%JAVA_HOME%/lib/tools.jar查看JDK是否配置成功source /etc/profilejava –version卸载自己安装的JDK方法rpm -e --nodeps jdk-1.7.0_67（jdk-1.7.0_67为自己安装的JDK版本）Maven安装去maven官网下载maven的安装包，并上传。解压缩maven的安装包tar -zxvf apache-maven-3.3.9-bin.tar.gz配置maven环境变量vim .bash_profileexport MAVEN_HOME=/home/hadoop/apache-maven-3.3.9export PATH=$PATH:$MAVEN_HOME/bin测试maven是否配置成功配置主机名在4执行如下命令vi /etc/sysconfig/networkNETWORKING=yesHOSTNAME=Master1 执行如下命令查看主机名是否修改成功service network restarthostname在5执行如下命令vi /etc/sysconfig/networkNETWORKING=yesHOSTNAME=Master2在6执行如下命令vi /etc/sysconfig/networkNETWORKING=yesHOSTNAME=Slave1在7执行如下命令vi /etc/sysconfig/networkNETWORKING=yesHOSTNAME=Slave2在8执行如下命令vi /etc/sysconfig/networ