部署Cloudera-Management-5.14-for-centos-7课件.docxVIP

部署Cloudera Management 5.14 for centos 7本文环境是在虚拟机上搭建的分布式环境。 - 软件: - 操作系统 ： CentOS7.3 GNOME DESTOP + development tools组包 - java : 这里使用的是jdk-8u161-linux-x64.rpm - mysql : 这里使用的是 5.5.56-MariaDB 以及 mysql-connector-java-5.1.46-bin.jar - Cloudera Manager - 下载地址 : /cm5/cm/5/- 这里下载的是 ： /cm5/cm/5/cloudera-manager-centos7-cm5.14.1_x86_64.tar.gz- CDH安装包 - 下载地址 ： /cdh5/parcels- 这里用的是 ：CDH-5.14.2-1.cdh5.14.2.p0.3-el7.parcel和CDH-5.14.2-1.cdh5.14.2.p0.3-el7.parcel.sha1注意对应的版本号，CentOS7对应的是el7系统环境配置1.首先修改各台机器上的主机名,如本人设置为master,slave。# hostnamectl set-hostname master2.修改主机名与IP的对应关系，向所有服务器配置/etc/hosts文件，向其中添加行# vim /etc/hosts87 master86 slave3.配置SSH无秘钥登录服务,注意每台机器上都要配置# ssh-keygen -t rsa# ssh-copy-id master# ssh-copy-id slave所有服务器均创建安装用户：cloudera# groupadd cloudera# useradd -g cloudera cloudera# echo ********* | passwd --stdin cloudera4.所有服务器为cloudera用户配置sudo权限# chmod u+w /etc/sudoers# echo cloudera ALL=(root)NOPASSWD:ALL /etc/sudoers# chmod u-w /etc/sudoers5.所有服务器关闭防火墙和Selinux服务关闭防火墙# systemctl mask firewalld.service关闭Selinux# sed -i /SELINUX=enforcing/d /etc/selinux/config# sed -i /SELINUX=disabled/d /etc/selinux/config# echo SELINUX=disabled /etc/selinux/config重启后生效。6.所有服务器设置文件打开数量及最大进程数cp /etc/security/limits.conf /etc/security/limits.conf.bak# echo * soft nproc 32000 /etc/security/limits.conf# echo * hard nproc 32000 /etc/security/limits.conf# echo * soft nofile 65535 /etc/security/limits.conf# echo * hard nofile 65535 /etc/security/limits.conf7.配置集群时间同步服务：通过ntp服务配置ntp主节点配置：# cp /etc/ntp.conf /etc/ntp.conf.bak# cp /etc/sysconfig/ntpd /etc/sysconfig/ntpd.bak# echo restrict mask nomodify notrap /etc/ntp.conf# echo SYNC_HWCLOCK=yes /etc/sysconfig/ntpd# service ntpd restartntp从节点配置创建shell脚本内容如下：# vim /opt/scripts/sync_time.sh# /sbin/service ntpd stop# /usr/sbin/ntpdate master# /sbin/service ntpd start赋权# chmod 777 sync_time.sh建立定时任务# crontab -e输入如下一行内容，保存退出：0-59/10 * * * * /opt/scripts/sync_time.sh安装Java每台服务器需要安装相同版本的Java。这里采用的是rpm方式安装Java.1.CentOS7自带了OpenJDK,但并不适用Cloudera Manage