京东云存储服务和应用探索-huihoo.pdf

京东云存储服务和应用探索 京东商城云平台部架构师 柳刘 cdliuliu@ 2013.04 大纲 • 我们为什么要做云存储？ – 应用场景 • 总体架构 – 挑战 – 开放API – 安全 – 小插曲：分库分表和全局ID实现 • 架构演进 – 三个阶段，不同规模 – 技术堆叠 • 典型应用——网盘 2 原存储使用模式 存储数 备份数 应用 上线 维护 需求 据 据 应用逻辑 + 大规模 软硬件 存储 部署 存储逻辑 资源分散 估算 购买资 重复建设 申请 源 单独运维 3 为什么需要云存储 新存储使用模式 存储难以 单独运维 迅速到位 成本高 应用 使用 需求 京东应用 资源利用 丰富 统一 率低 大规模 估算申 存储 存储 请 资源利用率高 迅速可用 免运维…… 4 统一存储挑战 可伸缩性 •灵活的水平扩展以应对数据丌断扩张的压力 高响应 •如何保证响应时间比单独存储无明显增加 安全性 •应用丌备份数据、云存储必须保证数据安全 吞吐量 •满足业务吞吐量要求、业务之间互丌影响 运维 •如何及时发现并解