学院智能管理项目部署运维手册.pdfVIP

学院智能管理项目

部署运维手册

XX科技股份有限公司编制

目录

一、文章编写目的5

二、前置准备5

2.1配置网络ip5

2.2编写相操作脚本9

1.批量执行命令脚本9

2.批量重命名脚本10

3.批量拷贝脚本11

4.cmmigrate,sh12

5.format2.sh13

6.mountDisk.sh13

7.network,sh14

8.node,ist14

9.node,txt15

2.3hostname及hosts酉己置15

1.配置每台节点的hostname15

2.配置节点ip、hostname映射16

2.4禁用SELinux16

2.5闭防火墙17

2.6设置swappiness18

2.7闭透明大页面19

2.8配置操作系统本地yum源20

2.9安装htp服务21

2.10集群时钟同步24

L所有机器卸载chrony24

2.所有机器安装ntp24

3.nodel机器配置时钟与自己同步24

4.集群其它节点，配置找nodel机器去同步24

5.重启所有机器的ntp服务25

6.验证始终同步，在所有节点执行ntpq-p命令，如下使用脚

本批量执行25

2.11安装MariaDB25

三、ClouderaManager安装30

3.1配置本地CM源30

3.2安装ClouderaManagerServer33

四、CDH安装34

4.1CDH集群安装向导34

4.2集群设置安装向导41

五、HBASE安装45

5.1准备工作：45

5.2安装：45

1.下载hbasel.3.246

2.解压46

3.配置环境变量~/.base_profiIe46

4.hbase-env.sh酉己置javahomc和ZK46

5.hbase-site.xml酉己置参数47

一、文章编写目的

本文档主要描述学院智能管理平台的安装主要分为4个步骤：

1.集群服务器配置，包括安装操作系统、闭防火墙、同步服务器时

钟等，又称为集群安装的前置准备，于更多前置条件准备也可以

参考之前的的文档《CDH安装前置准备》；

2.安装ClouderaManager；

3.通过ClouderaManager的WebUI向导式安装CDH集群；

4.集群完整性检查，包括HDFS文件系统、MapReduceHive等是否

可以正常运行。

本文操作说明基于以下假设：

1.操作系统版本：Redhat7.4

2.CDH和CM版本均为5.16.1

3.采用root对集群进行部署

4.您已经下载CDH和CM的安装包

二、前置准备

2.1配置网络ip

开启虚拟机，修改配置文件

输入如下命令

11/etc/sysconfig/network-scripts/ifcfg-*

会出现如下内容（ifcfg-ens后面的名字可能不同）

-rw.1rootroot6168月1319：25/etc/sysconfig/network-

scripts/ifcfg-ensl6777736

-rw-r一i—.1rootroot2