Hive窗口函数row_number应用：按性别分组选取年龄大两人.pdfVIP

_

1.Hive窗口函数rownumber示例

数据文件是:rownumbertest.txt，字段信息是:id,xb,age,name

五4,男,18,5,

男,18,6,男,

19,7,男,38,黄

渤8,女,22,

9,女,23,10,女,

28,11,女,

18,

用户信息表

创建数据库如果不存在则创建不存在hive_test;使用hive_test;删除表如果存在rownumbertest;创建表

rownumbertest(id整型,xb字符串,age整型,name字符串)行格式分隔符字段以分隔符,;加载

数据本地路径/home/hadoop/rownumbertest.txt到表rownumbertest;选择*从

数据结果展示:

需求:每种人群中，最大的两个人

TopN的需求:分组取前几

1.Hive窗口函数row_number案例

数据文件是：rownumbertest.txt，字段信息是：id,xb,age,name

1,男,18,张三

2,女,18,李四

3,女,20,王五

4,男,18,

5,男,18,

6,男,19,

7,男,38,

8,女,22,

9,女,23,

10,女,28,

11,女,18,

用户信息表

数据结果展示：

idxbagenamerank

1男18张三3

2女18李四5

3女20王五4

4男183

5男183

6男192

7男381

8女223

9女232

10女281

11女185

需求：每种人群中，最大的两个人

TopN的需求：分组取前几

思路:

partitionby和orderby搭配使用

||索引

|10|女|28||1|

|9|女|23||2|

|8|女|22||3|

|3|女|20|王五|4|

|11|女|18||5|

|2|女|18|李四|6|

|7|男|38||1|

|6|男|19||2|

|5|男|18||3|

|4|男|18||4|

|1|男|18|张三|5|+‑‑‑‑‑