Hive中的内部表与外部表Hive数据仓库技术69课件讲解.pptxVIP

河南工业职业技术学院Hive中的内部表与外部表《Hive数据仓库技术》边青全

hdfsmysql元数据1元数据2元数据3元数据4...HiveHive数据存储在Hive数仓中建表后，描述表信息的元数据存储在关系型数据库（如MySQL）中，表中的数据以文件的形式存储在Hadoop集群的HDFS中。元数据为访问数据仓库提供了一个信息目录（InformationDirectory），它是描述数据仓库中数据的结构、内容、位置及其他属性信息，是数据仓库运行和维护的中心。数据仓库服务器利用它来存储和更新数据，用户通过它来了解和访问数据。

字段数据Hive数据存储Hive数据仓库中的数据以表的形式存放在HDFS中，“表”是Hive中最基本的数据管理单元。Hive中的表按照功能分为包括内部表(Managedtable)、外部表（Externaltable）、分区表（Partition）、桶表（Bucket）、视图（View）等。

hdfshiveMysql元数据×××内部表Hive中的内部表，通常情况下简称“表”，也可以叫做“管表”。内部表的数据由hive进行管理，当使用drop删除表时，会把表的元数据（mysql）和数据（HDFS）一起删除，数据无法恢复，因此一定要慎用drop删除内部表。Hive中的表（内部表）：

HDFSHivePig内部表

内部表createtable表名(字段1类型1,字段2类型2,字段3类型3,...)rowformatdelimitedfieldsterminatedby分隔符linesterminatedby换行符;创建内部表：loaddatalocalinpath文件路径intotable表名;加载数据：

内部表例：创建表stuScore，其中包括班级名称、姓名、年龄、hive成绩、java成绩、python成绩字段。createtablestuScore(classNamestring,namestring,ageint,hiveScorefloat,javaScorefloat,pythonScorefloat)rowformatdelimitedfieldsterminatedby,linesterminatedby\n;创建内部表：

内部表descformatted表名;

内部表loaddatalocalinpath/usr/local/stuScore.txtintotablestuScore;加载数据：默认情况下的目录为：/user/hive/warehouse/使用：ip地址:50070内部表在hdfs上存放位置：

内部表删除之前：droptablestuScore;删除之后：

外部表外部表的数据不由Hive管理。使用drop命令删除一个外部表时，只把外部表的元数据删除掉，而表中数据不会被删除。hdfshiveMysql元数据×××

外部表createexternaltablestuScoreEXT(classNamestring,namestring,ageint,hiveScorefloat,javaScorefloat,pythonScorefloat)rowformatdelimitedfieldsterminatedby,linesterminatedby\n;创建外部表：loaddatalocalinpath/usr/local/stuScore.txtintotablestuScoreEXT;加载数据：

删除之前：droptablestuScoreEXT;删除之后：外部表

内部表与外部表对比内部表VS外部表不同之处在语法上，创建外部表时需要使用EXTERNAL关键字。当删除的时候，内部表元数据和HDFS中的表都会被删除掉，外部表只删除元数据，不会删除HDFS中的表。用途上，内部表不能进行数据共享，一般将临时表、中间表作为内部表。

河南工业职业技术学院Hive中的内部表与外部表《Hive数据仓库技术》边青全