Hive数据类型15课件.pptxVIP

《大数据分析技术应用》Hive数据类型

引言1Hive数据类型概述2原子数据类型3复杂数据类型4总结5

引言01

引言Hive作为数据仓库，支持多种数据类型，用于存储不同格式的数据。Hive数据存储数据类型在数据存储、查询和处理中很重要，影响数据的存储方式和查询效率。数据类型重要性了解常见数据类型，包括基础数据类型和复杂数据类型，可帮我们选择合适的数据类型。选择合适数据类型010203

Hive数据类型概述02

Hive基础知识介绍数据类型的作用数据类型定义了字段的性质、大小以及存储格式，影响数据的存储方式、查询效率与资源消耗：例如在日志分析场景中，用DATE类型存储“日志日期”比用STRING类型更节省存储空间，且支持日期运算（如筛选“近7天日志”），提升查询效率。基本分类Hive的数据类型可以分为两类：原子类型：包括数值类型（如订单金额）、字符串类型（如用户姓名）和日期时间类型（如订单创建时间），适用于存储单一维度数据。复杂类型：主要为集合类型（数组、映射、结构体），适用于存储多维度关联数据（如用户的历史订单列表、个人偏好配置）。

原子数据类型03

数值类型整型TINYINT（1字节，范围-128至127）、SMALLINT（2字节，范围-32,768至32,767）、INT（4字节，范围-2,147,483,648至2,147,483,647）、BIGINT（8字节，适用于大数据场景）。浮点型FLOAT（4字节，单精度浮点数）和DOUBLE（8字节，双精度浮点数，适用于高精度计算）。

字符串类型STRING（可变长度字符串，支持所有字符）、CHAR（固定长度字符串，定义时指定长度）和VARCHAR（可变长度字符串，但最大长度有限制）。字符串类型CREATETABLEecommerce_product(product_nameSTRING,--商品名称（可变长度）logistics_noCHAR(12),--物流单号（固定12位）short_descVARCHAR(50)--商品简短描述（最大50字符）);示例

日期时间类型示例CREATETABLEecommerce_order_log(order_dateDATE,--订单创建日期pay_timeTIMESTAMP--支付完成时间（含时分秒）);日期和时间类型DATE表示仅包含日期（年、月、日），而TIMESTAMP表示包含日期和时间（年、月、日、小时、分钟、秒）。

复杂数据类型04

集合类型结构体一个可以包含多种类型字段的复杂类型，类似于数据库中的记录。语法为STRUCTfield_name:field_type。数组元素的有序集合，元素类型一致。适合存储同一类型的多个值。语法为ARRAYelement_type。映射键值对集合，键和值可以是不同的类型。语法为MAPkey_type,value_type。

组合使用复杂数据表在实际使用中，数组、映射和结构体可以结合使用来构建更复杂的数据结构。用户数据表表同时使用了结构体、数组和映射，适合存储复杂的用户数据。

组合使用在实际大数据业务中，复杂类型可组合使用，适配多层级数据结构。以“电商用户画像表”为例，同时存储用户基本信息、历史订单、个性化偏好：建表语句：createtableecommerce_user_profile(user_idint,--原子类型：用户IDuser_base_infostruct--结构体：用户基本信息name:string,age:int,phone:char(11),order_id_listarraystring,--数组：用户历史订单ID集合user_preferencemapstring,string--映射：用户个性化配置)rowformatdelimitedfieldsterminatedby|--字段分隔符collectionitemsterminatedby,--集合内元素分隔符mapkeysterminatedby:;--映射键值分隔符

总结05

总结数据类型介绍介绍了Hive中的常见数据类型，包括数值类型、字符串类型、日期时间类型，以及集合类型（数组、映射、结构体）。数据类型的作用强调选择合适数据类型对性能和存储的影响，Hive的数据类型为我们在大数据分析中处理复杂数据提供了灵活的工具。0102

《大数据分析技术应用》