原创力文档- 1、本文档共71页，可阅读全部内容。
- 2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
- 3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 5、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 6、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
Hive研发参考 手册
亚信联创科技（中国）有限公司 PAGE \* Arabic 63 / NUMPAGES \* Arabic 71
HIVE 研发参考手册
（v1.0）
亚信联创科技（中国）有限公司
二零一三年五月
文档修改记录
序号
日期
版本
修改内容说明
修改人
1
2013/5/24
V1.0
起草
2
2013/5/24
V1.0
1.将原7.1、7.2、7.3章节修改成7.4,7.5，7.6，增加7.1和7.2，描述map和reduce的数量调整案例和方法
目录
TOC \o 1-3 \h \z \u 1. HIVE结构 6
1.1 HIVE架构 7
1.2 Hive 和 Hadoop 关系 8
1.3 HIVE元数据库 9
1.4 Hive 和普通关系数据库的异同 9
1.4.1 DERBY 10
1.4.2 Mysql 12
1.5 HIVE的数据存储 12
1.6 其它HIVE操作 13
2. HIVE 基本操作 14
2.1 create table 14
2.1.1 总述 14
2.1.2 语法 14
2.1.3 基本例子 16
2.1.4 创建分区 17
2.1.5 其它例子 18
2.2 Alter Table 19
2.2.1 Add Partitions 19
2.2.2 Drop Partitions 19
2.2.3 Rename Table 20
2.2.4 Change Column 20
2.2.5 Add/Replace Columns 20
2.3 Create View 21
2.4 Show 21
2.5 Load 22
2.6 Insert 23
2.6.1 Inserting data into Hive Tables from queries 23
2.6.2 Writing data into filesystem from queries 24
2.7 Cli 25
2.7.1 Hive Command line Options 25
2.7.2 Hive interactive Shell Command 26
2.7.3 Hive Resources 27
2.7.4 调用python、shell等语言 28
2.8 DROP 29
2.9 其它 29
2.9.1 Limit 29
2.9.2 Top k 30
2.9.3 REGEX Column Specification 30
3. Hive Select 30
3.1 Group By 30
3.2 Order /Sort By 31
4. Hive Join 31
5. HIVE参数设置 34
5.1 配置文件 36
5.2 命令行参数 36
5.3 参数声明 36
6. HIVE UDF 36
6.1 基本函数 36
6.1.1 关系操作符 37
6.1.2 代数操作符 38
6.1.3 逻辑操作符 39
6.1.4 复杂类型操作符 39
6.1.5 内建函数 40
6.1.6 数学函数 40
6.1.7 集合函数 40
6.1.8 类型转换 40
6.1.9 日期函数 40
6.1.10 条件函数 41
6.1.11 字符串函数 41
6.2 UDTF 43
6.2.1 Explode 43
7. HIVE 的MAP/REDUCE 45
7.1 控制MAP数量 45
7.1.1 合并小文件（输入） 45
7.1.2 增加MAP 46
7.2 控制REDUCE数量 46
7.2.1 Hive默认reduce数： 46
7.2.2 REDUCE数量调整 47
调整reduce个数方法一 47
调整reduce个数方法一 47
避免一个reduce出现 47
7.3 JOIN 48
7.4 GROUP BY 49
7.5 DISTINCT 49
8. 使用HIVE注意点 50
8.1 字符集 50
8.2 压缩 50
8.3 count(distinct) 50
8.4 JOIN 51
8.5 DML操作 51
8.6 HAVI
文档评论（0）