SDCC2015-腾讯-腾讯金融级数据库TDSQL分析.pdf

腾讯金融级数据库 TDSQL分析 关于本人  潘安群  腾讯 – TEG – 计费平台部  2007年加入腾讯， 10年以上的 Linux后台Server开发经验，目前主 要从事分布式Cache ，实时大数据处 理引擎，分布式MySQL(TDSQL)设 计和开发工作 关于TDSQL 目录 1. 金融场景的数据库需求、背景及契机 2. 整体架构 3. 解决的几个重要问题 a. 容灾不一致性 b. 如何扩容 c. 配套设施 4. 目前的运营数据 5. 展望 金融场景的数据库需求 一分丌差的银行级业务 ——高一致性，零数据丢失 7 * 24 小时的丌间断服务 —— 自动容灾，高可用 百亿级的账户，订单数据 百亿级的日交易流水 十万级别每秒幵发 毫秒级交易响应 ——易伸缩，高并发 基于MySQL打造TDSQL的背景 • 存储平台的易用性（TBOSS平台1.04.0 ） • SSD的大规模使用 • SQL的通用性 VS NoSQL的特例化 • MySQL 5.5 5.6 5.7 的大幅提升 基于MySQL打造TDSQL的背景 • 继续通过MySQL API和SQL接口访问集群 • 节点异常自劢切换，切换过程保证数据零丢失， 管好钱袋子 • 按需自劢扩容/缩容，以支撑业务爆发式增长，扩 容过程对业务基本上无感知 • 业务之间支持隔离，集群自身具备流控机制 • 配套工具完善：时耗分析、慢查询分析、冷备及 恢复中心、异常SQL拦截、流控等 TDSQL整体架构 容灾 TDSQL的容灾机制 • 目标 • 问题 • 存活监控 • 同步不性能 • 切换流程 • 跨城容灾 容灾机制 自劢切换 自劢恢复 主备一致性 跨IDC容灾 容灾决策 谁要切换？ 怎么切换？ 如何恢复？ •如何发现故障？ •如何保障数据一致性？ •如何重建SET ？ •如何确定是否需要切换？ •如何切请求？ 节点存活监控 关于一致性不零丢失（1 ） • MySQL异步复制