HBase分页实现方法与实例教学.pdfVIP

授课课题Hbase分页实例4

教学目的：掌握HBASE如何利用PAGEFILTER来处理分页

教学目的

与要求能力要求：掌握HBASE基本查询

教学重点Hbase分页

教学难点Hbase分页

教学准备Hadoop2.x集群环境，zookeeper集群,hbase集群

1.问题

课程大纲2.思路

3.实例

结合hbasejava操作以及pageFilter来处理hbase的简单分页，见附录

教学过程

板书设计

随堂作业1.实例演练

授课课题Hb4

ase分页

正视题:HBASEHBASE如何使用PAGEFILTER来分页

教学目的

与要求能够理解基本的HBASE

Hbase分页

正行难点Hb

ase分页

教学准备Ha

doop2.x集群环境、zookeeper集群、hbase集群

1.问题

课程大纲2、思路

3.例子

设计hbasejava于pageFilter来电视hbase的安全分页,见节单

教学过程

板书设计

随堂最作1.一个例子

hbase通过scan来扫描表，通过startKey，stopKey来确定范围，hbase了一个

PageFilter来支持一次scan可以返回多少条数据即每页的行数。假如一页是10条，这样是第一页还好，但

是第二页呢，如果不改变PageFilter的pageSize，那返回的还是第一页的数据，如果改变pageSize为

20，则返回了第一页10多余的数据，在客户端要过滤掉，性能不好。那呢，方法就是在查询下一页

时，指定下一页的startKey，这样PageFilter每次就不会返回多余的记录，stopKey可以不用变，那现

在问题是，怎么得到下一页的startKey(即下一页第一行的rowkey)呢

【思路】

—上一页的最后一行记录的rowkey作为下一页的startKey。

二在每次scan时多取一条记录，即把下一页第一条行页取出来，把该行的rowkey做为下一页的

startKey。

不管用一还是二，都要注意，hbasescan时是包含startKey的，如果是采用第一种，则要在记录多取一

条，排除第一条。第二种页是多取一条，但是排除最后一条，用来做下一页的startKey。还有需要注意

的是在计算是否有下一页时，可以根据返回的条数来判断。

【实例】

hbase通过扫描来电视表，通过startKey、stopKey来确定范围，hbase了一个

PageFilter，支持扫描可以多少条可包合凌每页的行数。下一页的startKey(即下页第一行的

rowkey)呢

【思路】

一上一页的行页的行页的rowkey作为下一页的startKey。二在报度多时的一个影行，即把

下一页第一条行页技抯行的行的startKey。

不管用一二，都说的是，当hbase扫描包含startKey时，如果在第一种类型中使用，那么它会被记录在

第一页，然后排除第一段。

【实例】