高可用HBase的技术实践.pdf

高可用HBase的技术实践 沈春辉 2016-3 Confidential & Proprietary 1 内容大纲 – HBase特点简介 – HBase在阿里使用状况 – Ali-HBase的高可用实践 Confidential & Proprietary 2 HBase的特点简介 – 描述 • 以表的形式组织数据，提供实时更新、增量导入、随机查询、 条件范围查询能力的分布式NOSQL数据库 – 基因 • 自动分区 • LSM-Tree • 基于K-V的行组织 • 存储计算分离(base on HDFS) • 单点服务 Confidential & Proprietary 3 HBase的特点简介 Confidential & Proprietary 4 HBase的特点简介 场景 适用描述 结构化数据 用户的前台数据实时读写HBase ，如电商交易行为 在线存取 产生的各种记录 高吞吐 日志、消息、监控、聊天等需要高吞吐写入的数据存 数据写入 取 海量数据 安全风控场景，在线、离线写入大量用户行为数据 实时写入 实时查询判断行为风险 与查询 实时流计算 作为流计算平台(Galaxy、JStorm)的中间计算和结 的底层存储 果数据的存储 Confidential & Proprietary 5 HBase在阿里的使用状况 Confidential & Proprietary 6 HBase在阿里的使用状况 – 2011.5 上线第一个HBase应用 – 到目前 单集群 200+业务 10+IDC 上千 Confidential & Proprietary 7 高可用HBase目标 – SLA Confidential & Proprietary 8 高可用HBase目标 – M R （Mean Time To Recover ） – 影响因素 • 集群规模 • 系统压力