360搜索技术论坛长期交流群.PDFVIP

360搜索技术论坛长期交流群 分布式存储实践 陈宗志 介绍 • 2013年加入360 • 主要项目 • Bada 类Dynamo 分布式存储 • Pika 兼容Redis 协议Nosql • Zeppelin 海量数据存储, 支持pb, s3协议 • 基础库: Pink, Slash, floyd 等等 大纲 • 在线存储 • 了解硬件 • 基础理论 • 存储引擎 • zeppelin 设计 离线存储 • 离线存储 • 吞吐 • 成本 在线存储 • 在线存储 • 性能 • 稳定性 • 接口 在线存储 • key-value • 表格存储 • 块存储 • S3(Simple Storage Service) • 图数据库 • new-sql • … Bada • key-value store • 云盘场景: 所有云盘用户文件索引, 通过 bada 查询文件所在存储节点 写入近百亿, 峰值QPS20万, 数据总量千亿, 单条value