《RebornDB 下一代分布式KV数据库》.pdf

RebornDB 下一代分布式KV数据库 唐刘(tl@) 关于我 PingCAP ：分布式数据库 金山：企业快盘，轻办公 腾讯 ：P2P下载 蓝港在线 ：佣兵天下 开源软件：LedisDB，Mixer，Go-MySQL等 先来假设一个场景： 公司因为业务发展，需要使用 一个KV数据库 现有KV数据库 Redis  Couchbase MongoDB Cassandra 特多了。。。。。。 Redis 纯内存，性能高，速度快 协议简单，客户端丰富 string，list，hash，set，zset等数据结构 持久化支持，RDB，AOF Replication支持 大量公司使用，市场选择 但突然有一天 出大事了 Redis问题 数据量太大，内存不够 无法区分冷热数据，内存浪费严重 RDB Block住整个服务 写操作太频繁，AOF刷盘太多，很容易就rewrite Redis Cluster? 官方出品，但最近才出了一个stable版 业界几乎没有成功案例，没有最佳实践指导 系统 复杂度高，运维难度高，升级困难 要修改客户端，在逗我？ QDB redis子集，支持大部分常用redis命令 string,hash,list,set,zset数据结构支持 多存储引擎支持，rocksdb，leveldb等 超越内存限制，热点数据内存，冷数据硬盘 qdb - redis相互同步，支持psync断点续传 go多核友好，并发读支持，性能强悍 QDB 但突然有一天。。。 数据量太大，硬盘撑不 住了 单点，性能瓶颈 我们得考虑集群了 集群方案？ Smart Client Proxy based P2P Smart Client QDB QDB QDB smart client smart client smart client smart client Smart Client Pros: Cons: 直连后端存储，性能 不同语言都需要定制客 高，延迟低 户端 升级较困难 Proxy Based QDB QDB QDB proxy proxy client client client Proxy Based Pros: Cons: 隐藏集群信息，对外黑 多了一层，性能损耗 盒 现有客户端直接使用 更好的监控，控制，升 级 P2P client client node node node client client P2P Pros: Cons: 去中心化，完全分布式