Hive入门教程从零开始掌握大数据处理.pptVIP

Hive的基础培训第1页

Hive结构图数据存放Hive数据以文件形式存放在HDFS的指定目录下Hive语句生成查询计划，由MapReduce调用执行顾客接口解析器：生成抽象语法树语法分析器：验证查询语句逻辑计划生成器（涉及优化器）：生成操作符树查询计划生成器：转换为map-reduce任务CLI：开启的时候，会同步开启一种Hive副本Client：Hive的客户端，顾客连接至HiveServerWUI：通过浏览器访问Hive语句转换第2页

Hive元数据表名说明关联键BUCKETING_COLSHive表CLUSTEREDBY字段信息(字段名，字段序号)SD_ID?，INTEGER_IDXCOLUMNS_V2Hive表字段信息(字段注释，字段名，字段类型，字段序号)CD_IDDBS元数据库信息，保存HDFS中存放hive表的路径DB_IDPARTITION_KEYSHive分区表分区键TBL_IDSDS所有hive表、表分区所相应的hdfs数据目录和数据格式。SD_ID,CD_IDSD_PARAMS序列化反序列化信息，如行分隔符、列分隔符、NULL的表示字符等SD_IDSEQUENCE_TABLE保存