dcp-弹性扩容.pdf

新浪微博DCP 基于Docker的混合云架构与应用实践 @it_fuwen 微博平台研发中心 11/28/2016 主要分享内容 一、背景、挑战与实现 二、基础设施 三、弹性调度 四、Weibo DCP编排 五、春晚实战与总结 Part 1 Weibo DCP 背景、挑战与实现 微博业务挑战 用户 业务量 系统 运维 KPI 用户：8亿 日志：百T+ 设备：万+ Docker ：80% SLA ：99.99% DAU ：1亿+ RPC ：万亿+ 集群：500 + 扩缩容 ：5min RT ：50ms MAU ：2亿+ 接口 ：600亿 业务线：100+ 变更：30次/w 故障分 ：2/季 + 微博技术平台 十亿级PV、千亿级数据、2000台以上的服务器规模、20个以上的大小服务模块、百亿 级数据HBase存储、千台以上的Docker混合云集群，持续不断的技术挑战； 微博业务现状 • 春晚峰值流量应对 • 机架位不足，上千台服务器库存不足 • 千万级采购成本巨大 • 采购周期长，运行三个月只为一晚 • “宝宝”娱乐事件等热点突发峰值应对 • 突发性强无预期、无准备 • PUSH常规化，短时间大量设备扩容需求 如何10分钟内完成1000节点扩容能力？ 服务扩缩容流程繁琐 项目评审 装机 报修 入CMDB 初始化 服务部署 设备申请 上架 下架 微博业务现状与解决方案 弹性快速扩缩容 混合云弹性调度可伸缩业务成本节省数倍 极端峰 成本 值 业务快 扩展性 速迭代 扩无可扩？技术体系升级 产品更新迭代快，系统变更代码指数增长 扩！扩！扩！ 平滑 快速 无缝 高效 ？？？ 业界趋势 混合云趋势：安全、可扩展性、成本... • 阿里云、AWS等公有云平台趋于成熟 • 国外Zynga、Airbnb、Yelp等使用AWS进行部署 • 国内阿里云12306、高德、快的已部署，陌陌等部署中 • 12306借助阿里云解决饱受诟病的春节余票查询峰值问题 • Docker、Mesos等容器新技术使大规模动态调度成为可能 • 京东618大促借助Docker为基础的弹性云解决峰值流量问题 12306混合云案例