单元1Hive前的准备.pptxVIP

课程主讲人： 单元1Hive前的准备 Hive数据仓库技术与应用 Hive前的准备 单元1 Hive的产生背景 1 Hive的产生背景 1 Hive的产生背景 Apache Hive数据仓库软件可以使用SQL方便地阅读、编写和管理分布在分布式存储中的大型数据集。产生背景有以下几个方面： Hive的背景 1 Hive的产生背景 （1）MapReduce编程使用起来不方便、不适合事务/单一请求处理、不能随即读取、以蛮力代替索引。 （2）Hive由Facebook开源，最初用于解决海量结构化的日志数据统计问题，它是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行。 Hive的产生背景 1 Hive的产生背景 （3）Hive是建立在 Hadoop 上的数据仓库基础构架。 （4）Hive比较简单、容易上手（提供了类似于SQL查询语言HQL）、为超大数据集设计的计算/存储扩展能力（MR计算，HDFS存储）、统一的元数据管理。 Hive的产生背景 Hive的产生背景 Hive的实现 Hive的产生背景 Hive的实现 2 Hive的概念 2 Hive的概念 （1）Hive包含了3大组成部分： ① Hive Clients ② Hive Services ③ Hive Storage a