课程主题HBase和Hive的整合大数据应用开发.pptx

大数据应用开发课程现代殡葬技术与管理专业群教学资源库主讲人：陈为满课程主题：HBase和Hive的整合

CONTENTSCONTENTS一HBase和Hive的整合

一HBase和Hive的整合在实际业务中，由于HBase不支持使用SQL语法，因此我们操作和计算HBase分布式数据库中的数据是非常不方便的，并且效率也低。由于Hive支持标准的SQL语句，因此，我们可以将HBase和Hive进行整合，通过使用Hive数据仓库操作HBase分布式数据库中的数据，以此来满足实际业务的需求。

一HBase和Hive的整合通过一个整合Hive和HBase的例子，实现Hive表中插入的数据可以从HBase表中获取的需求，具体步骤如下：1环境搭建。在服务器hadoop01上执行命令“vi/etc/profile”，配置Hive和HBase的环境变量。2导入依赖。将目录/hbase-1.2.1/lib下的相关依赖复制一份到目录/apache-hive-1.2.1-bin/lib下。3在hive-site.xml配置文件中，添加Zookeeper集群地址和指定其端口号，执行“source/etc/profile”命令使环境变量配置文件生效。4启动相关的服务。启动Zookeeper、Hadoop、MySQL、Hive以及HBase服务。

5新建Hive表。在Hive数据库创建hive_hbase_emp_table表，实现Hive与HBase整合。6创建Hive临时中间表。由于不能将数据直接插入与HBase关联的Hive表hive_hbase_emp_table中，所以需要创建中间表emp。7插入数据。向临时中间表emp插入数据，再通过insert命令将临时中间表emp中的数据导入到hive_hbase_emp_table表中。8查看hive_hbase_emp_table表和hbase_emp_table表的数据是否一致，则来判断HBase和Hive是否整合成功。一HBase和Hive的整合

感谢聆听，批评指导