hbase架构详解课件.pdfVIP

HBase架构详解—课程概要

•HBase架构

•HBase数据

•HBase表

•HBase管理命令

HBase架构详解

HBase架构

HBase架构—知识点

•HBase组件

•HBaseRegion定位

•HBase容错性

•HBase数据

HBase架构—HBase组件

HBase架构—HBase组件

客户端Client

•整个HBase集群的

•使用HBaseRPC机制与HMaster和HRegionserver通信

•与HMaster通信进行管理类的操作

•与HRegionserver通信进行读写类操作

•包含HBase的接口，并cache来加快对HBase的，与

HRegionserver交互

HBase架构—HBase组件

程序协调服务Zookeeper

•保证任何时候，集群中只有一个Master(HA)

•存贮所有Region的寻址

•实时Regionserver的上线和下线信息。并实时通知给Master

•HBase的schema和table元数据

HBase架构—HBase组件

HBase主节点Master

•管理用户对Table的增删改查操作

•管理HRegionServer的负载均衡，调整Region分布

•在RegionSplit后，负责新Region的分配

•在HRegionServer停机后，负责失效HRegionServer上的Region迁移

•HMaster失效仅会导致所有元数据无法被修改，表的数据读写还是可以正常进行

HBase架构—HBase组件

HRegionServer节点

•Hregion并往HDFS中写数据

•当表的大小超过设置值得时候，SplitHRegion

•在HRegionServer停机后，负责失效HRegionServer上的Region迁移

HBase架构—HBase组件

HBase与Zookeeper

•HBase元数据在Zookeeper中

•默认情况下，HBase管理ZooKeeper实

例，比如，启动或者停止ZooKeeper

•Zookeeper解决HBase单节点故障问题

•HMaster与HRegionserver启动时会向

Zookeeper

HBase架构—HBaseRegion定位

HBase架构—HBaseRegion定位

寻找RegionServer过程详解

•ZooKeeper（Zookeeper找到-ROOT-表的位置）

•-ROOT-(-ROOT-表包含.META.表所在的region列表，该表只会有一个

Region;Zookeeper中记录了-ROOT-表的location)

•.META.(.META.表包含所有的用户空间region列表，以及RegionServer的服务

器地址)

•用户表

•Client第一次操作后，会将-ROOT-和.META.缓存到本地，不需要再

zookeeper

HBase架构—HBase容错性

•Master容错：Zookeeper重新选择一个新的Master