Cloudera大数据平台环境搭建(CDH5.13.1)傻瓜式说明书.docxVIP

. . . . Cloudera 大数据平台环境搭建 （CDH5.13.1 版） 版本 版本 作者 发布日期 v1.0 郭维忠2018-03-10 目录 Cloudera 大数据平台环境搭建 1 （CDH5.13.1 版） 1 基础环境 4 1.1. 软件环境 4 1.2. 配置规划 4 1.3. 所需要的软件资源4 1.4. 修改机器名（所有节点） 5 1.5. 设置防火墙（所有节点） 5 1.6. 配置免密码登录 SSH 6 1.7. 关闭 SELINUX（所有节点） 7 1.8. 修改 Linux 核参数（所有节点）7... 1.9. 其他安装与配置（所有节点） 8... 1.10. 配置 NTP 服务9 安装 oracle JDK1.8 （所有节点） 10 Mysql 安装（主节点） 11 2. 安装 CM. 1. 2 TOC \o 1-2 \h \z \u 传包，解包 12 创建数据库 13 创建用户 13 制作本地 YUM 源 14 拷贝 jar 包 14 修改 cloudera-scm-agent 配置 14 启动 CM Server 和 Agent 15 访问 CM. 15 安装 CDH 1. 5 登录后界面 15 选择 CM 版本 16 指定主机 17 选择 CDH 版本 18 出现 “主机运行状态不良”错误 19 检查主机正确性 19 选择安装的服务 20 角色分配 20 数据库设置 21 测试连接报错： 22 群集设置 23 开始安装 24 安装完成 25 警告信息： 25 常见错误 2. 7 初始化数据库错误： 27 未能连接到 Host Monitor 28 基础环境 软件环境 NO.软件名称 NO. 软件名称 版本 1. 2. 3. 4. 5. 6. 操作系统 JDK Clouder Manager CDH 数据库 JDBC Centos7.4 64 位 jdk-8u151-linux-x64 5.13.1 5.13.1 Mysql 5.7 mysql-connector-java-5.1.43.jar 配置规划 本次安装共 5 台服务器，服务器配置及用途如下： NO. 机器名称 网 IP 配置 用途 1. node168 68 8C/32Gb/1TB 主，CM，MysqlDB 2. node169 69 8C/32Gb/1TB 从 3. node170 70 8C/32Gb/1TB 从 4. node171 71 8C/32Gb/1TB 从 5. node172 72 8C/32Gb/1TB 从 所需要的软件资源 JDK 环境： JDK 版本：1.8.0_151 jdk-8u151-linux-x64.rpm 下载地址：.oracle./technetwork/java/javase/downloads/jdk8-downloads-2133151.html CM 包： CM 版本：5.13.1 cloudera-manager-centos7-cm5.13.1_x86_64.tar.gz 下载地址：archive-primary.cloudera./cm5/cm/5/cloudera-manager-centos7-cm5.13.1_x86_64.tar.gz CDH 包 CDH 版本：5.13.1， CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel； CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1； manifest.json 下载地址： archive-primary.cloudera./cdh5/parcels/5.13.1/manifest.json archive-primary.cloudera./cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel.sha1 archive-primary.cloudera./cdh5/parcels/5.13.1/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel JDBC 连接 jar 包： jar 包版本：5.1.43， mysql-connector-java-5.1.43.jar 下载地址：/maven2/mysql/mysql-connector-java/5.1.43/mysql-connector-java-5.1.43.jar 修改机器名（所有节点） # hostnamectl # hostnamectl set-hostname xxx //设置机器名#hostname // 查看本机名 这种方式，在 Centos7 中可以永久