《Hive数据仓库案例教程》教学课件-第3章--Hive基础.pptxVIP

第3章 Hive基础;3.1 Hive数据类型 ;3.1 Hive数据类型;3.1.1 基本数据类型;基本数据类型;基本数据类型;3.1.2 复杂数据类型;复杂数据类型;3.1.3 数据类型转换;隐式数据类型转换;强制数据类型转换;3.2 Hive运算符;3.2.1 算术运算符;3.2.2 比较运算符;比较运算符;比较运算符; ;3.2.4 复杂运算符;3.3 Hive数据存储; Hive数据存储;3.4 Hive表存储格式;3.4.1 行式存储和列式存储;行式存储的特点;列式存储的特点;TextFile格式是Hive在创建表时默认的存储格式，不压缩数据，磁盘开销大，数据解析开销也较大。可结合Gzip、Bzip2压缩使用，但使用Gzip压缩方式，Hive不会对数据进行分割，所以无法对数据进行并行计算。;SequenceFile格式是Hadoop用来存储二进制数形式的key,value键值对而设计的一种文件格式。在存储结构上，SequenceFile主要由一个头部（Header）后面跟多条记录（Record）组成。 Header主要包含存储压缩算法、用户自定义元数据等信息。此外，还包含一些同步标识，用于快速定位到记录的边界。每条记录以键值对的方式进行存储，用来表示它的字符数组可以一次解析为记录的长度、key的长度、key值和value值，并且value值的结构取决于该记录是否被压缩。SequenceFile格式支持数据压缩，有以下3种类型的压缩。;无压缩类型（None）;记录压缩类型（Record）;块压缩类型（Block）;ORC（Optimized Row Columnar）格式是Hive 0.11版本引入的表存储格式。 每个ORC文件由一个或多个Stripe组成，每个Stripe大小为250MB。每个Stripe由3部分组成，分别是Index Data、Row Data和Stripe Footer。;Index Data;Row Data;Stripe Footer;;3.5 Hive常用交互命令;Hive常用交互命令;Hive常用交互命令;3.6 Hive其他操作命令;Hive其他操作命令