Flink实时大数据处理技术 课后习题及答案 08.doc

Flink实时大数据处理技术版

第8章TableAPI和SQL

PAGE288

PAGE289

1）FlinkTableAPI和SQL有什么区别？

2）利用TableAPISQL从HBase中读取任意数据并输出到控制台，列出详细实现步骤。

3）利用TableAPISQL从DataGen连接器中生成模拟数据并将数据写入到HBase，列出详细实现步骤。

4）假设有一个数据表orders，其中包含订单信息：

CREATETABLEorders(

order_idSTRING,

user_idSTRING,

item_idSTRING,

order_timeTIMESTAMP(3),

priceDOUBLE

)WITH(

connector=...,--指定连接器类型，例如kafka,filesystem等

--其他连接器相关配置，例如topic=...,path=...等

);

i．编写SQL语句计算每个用户的总订单金额。

ii．编写SQL语句查询在特定时间范围内（例如：2023-01-01到2023-01-31）的订单总金额。

5）假设有一个数据表user_clicks，其中包含用户点击信息：

CREATETABLEuser_clicks(

click_idSTRING,

user_idSTRING,

item_idSTRING,

category_idSTRING,

click_timeTIMESTAMP(3)

)WITH(

connector=...,--指定连接器类型，例如kafka,filesystem等

--其他连接器相关配置，例如topic=...,path=...等

);

编写SQL查询每个类别（category_id）下点击次数最多的商品及其点击次数。

Flink实时大数据处理技术版

第8章TableAPI和SQL

PAGE288

PAGE289

参考答案：

FlinkTableAPI和SQL有什么区别？

在Flink中通过TableAPI和SQL都可以对表进行查询处理，两者的区别在TableAPI是基于Scala和Java语言的查询API，而SQL则主要是以字符串的形式完成，TableAPI的查询不是由字符串指定，而是基于语言中定义的各类方法完成。

利用TableAPISQL从HBase中读取任意数据并输出到控制台，列出详细实现步骤。

创建Flink环境

valenv:StreamExecutionEnvironment=StreamExecutionEnvironment.getExecutionEnvironment

valtEnv:TableEnvironment=StreamTableEnvironment.create(env)

创建Hbase连接

valhbaseContext=tEnv.createHBaseContext(hbase-client,hbaseZooQuorum)

创建查询

valquery=SELECTcolumn1,column2FROMmyTable

valresultTable=hbaseContext.executeSql(query)

将结果打印到控制台

resultTable.print()

利用TableAPISQL从DataGen连接器中生成模拟数据并将数据写入到HBase，列出详细实现步骤

objectTableExample{

defmain(args:Array[String]):Unit={

valenv=StreamExecutionEnvironment.getExecutionEnvironment

valtableEnv=StreamTableEnvironment.create(env)

//创建表

valsourceDesc=TableDescriptor.forConnector(datagen)

.option(rows-per-second,2)

.option(fields.name.length,5)

.option(fields.id.min,1)

.option(fields.id.max,100)

.option(fields.score.mi