大数据技术基础及应用（微课版） 实验手册集群综合实验1.docx

集群综合实验

实验背景

大数据业务中，通常需要将多种组件构建成一个业务系统，以满足上层业务需要。

现在某企业需要构建一个构建一个大数据分析和实时查询平台，需要用到Loader、MySQL、Hive以及Hbase四个主要组件。主要负责数据的迁移、导入、查询、处理四个不同的功能，其中首先由Loader定时将Mysql数据库数据迁移到Hive中，由于Hive数据存储在HDFS中，所以采用Loader将HDFS中的数据导入到HBase中。利用HBase进行实时数据查询，利用Hive的大数据处理能力，分析相关结果。

实验目的

综合运用大数据组件进行数据的转换和实时查询。

实验前提

实验环境创建成功后，