Hadoop大数据技术与项目实战 实训指导书——2.4.3 Hive与MySQL整合及hive服务启动.pdf

山西职业技术学院《Hadoop大数据技术与项目实战》

Hive与MySQL整合及启动Hive服务

一、任务描述

本任务首先创建Hive元数据库，接下来统一Hive和Hadoop的guavajar包版本，

上传MySQL与Hive的连接驱动包至Hive的lib目录下，最后格式化Hive元数据库并启

动Hive服务。

二、能力目标

1.理解创建Hive元数据库的意义

2.能成功格式化Hive元数据库

3.能成功启动Hive服务

三、任务准备

1.启动HDFS集群

2.Xshell软件、Xftp软件

3.mysql-connector-java-5.1.48.jar

四、任务实施

1.创建Hive元数据库

使用如下命令登录MySQL，并在MySQL中创建元数据库hiveMetaStore，用来存

储Hive元数据信息，创建数据库后退出MySQL。

[bigdata@node1module]$mysql-uroot-p123456

mysqlcreatedatabasehiveMetaStore;

mysqlexit;

2.统一guavajar包版本

1

山西职业技术学院《Hadoop大数据技术与项目实战》

通过查看得知hive-3.1.2中的为guava-19.0.jar，hadoop-3.3.0中的guavaja

r包版本为guava-27.0-jre.jar，因为二者版本不一致，将会导致后续元数据库初始化

操作失败，所以我们将二者统一为较高版本的guava-27.0-jre.jar。

首先切换到node1节点的/opt/module/hive-3.1.2/lib目录下，删除guava-19.0.

jar，然后将Hadoop的guava-27.0-jre.jar复制到当前路径/opt/module/hive-3.1.2/l

ib/下。

[bigdata@node1module]$cd/opt/module/hive-3.1.2/lib/

[bigdata@node1lib]$rm-rfguava-19.0.jar

[bigdata@node1lib]$cp/opt/module/hadoop-3.3.0/share/hadoop/common/lib/gua

va-27.0-jre.jar./

3.上传MySQL与Hive的连接驱动包

MySQL与Hive二者关联，需要有连接驱动包mysql-connector-java-5.1.48.jar，

因此，使用Xftp软件将该驱动包上传至/opt/module/hive-3.1.2/lib目录中，如下图

所示。

4.格式化Hive元数据库

2

山西职业技术学院《Hadoop大数据技术与项目实战》

执行以下命令格式化元数据库hiveMetaStore。

[bigdata@node1lib]$schematool-initSchema-dbTypemysql-verbose

登录MySQL。

[bigdata@node2~]$mysql-uroot-p123456

查看初始化后的元数据库中的表信息。

mysqlusehiveMetaStore;

mysqlshowtables;

执行命令后，显示了hiveMetaStore元数据库中的所有表信息，说明元数据库初始

化成功。

退出MySQL。

mysqlexit;

5.启动Hive服务

在node1命令行中执行如下命令启动元数据服务。

[bigdata@node1lib]$hive--servicemetastore

因为该命令是前台启动命令，所以执行后命令行会进入阻塞状态，如下图所示。

再复制一个node1会话窗口，使用jps命令查看启动的服务进程，RunJar