滴滴出行自动化运维实践.pptxVIP

滴滴自动化运维实践滴滴如何运维千级别规模机器Agendav滴滴运维问题与挑战v滴滴自动化运维思路v滴滴自动化运维实践 ? WorldTree(统一资源管理) ? 监控系统? 自动故障处理滴滴运维挑战v 产品线多且同构, 运维工作如何复用? ? 出租车: api,mis, …? 专车: api,mis, …? …v流量突增, 如何快速扩容?? 初始化环境? 监控采集/报警策略? …v业务频繁变更, 如何维护服务稳定?? 代码 bug? 故障定位? …运维思路? 运维对象以服务节点为中心, 而不是具体机器? 服务节点包含运维资源(机器,初始化策略,…)? 资源变更自动化感知并应用到对应服务器(Puppet, 监控采集 agent, 报警策略,…)滴滴实践(Odin)服务树(设计考虑)v核心作用:? 统一资源管理? 逻辑空间隔离v核心用户:? 运维人员(精通命令,擅长文本操作)v系统特点? 读多写少(读取速度决定用户体验)v常见设计v数据库存储树形结构v数据库存储 Tag, 动态构建树WorldTree(设计)v 目录结构即树v 运维元素抽象为资源,文本存储v 机器v 初始化策略v 监控采集策略v …v 资源变更版本记录WorldTree(模板)v 父节点包含资源模板 v 初始化策略 v 监控采集策略 v …v 创建时继承非运行时v Agent 直接依赖叶子节点资源v 支持模板变量, 动