架构师视角看美团点评运维自动化的发展和思考.PDFVIP

架构师视角看 美团点评运维自动化的发展和思考 钟红军 美团点评运维中心高级总监 从一个案例说起 • 运维场景： • 少量应用使用外网IP （出），通过一个NAT设备 • 问题： • 无人知晓有多少这样的应用，这样的IP • 解决方案： • 做一个外网IP管理系统？ 这个方案的问题 • 1，如何知道它的数据是准确的？ • 2，设计什么样的流程来保证数据准确？ • 3，真的为了每一个问题去开发一个工具吗？ • 端口怎么办？ • 白名单怎么办？ • 其他AD hoc 的场景怎么办？ 问一个更本质的问题： • 运维自动化是什么？（美团点评SRE 的思考） • 它解决什么问题？ • 它用什么思路？ • 它的核心要素是什么？ • 它的本质目标是什么？ 第一阶段：工具 • 强大的单体工具 • 解决具体的痛点 问题 • Puppet, Zabbix…… • 工具的不懈追求 第二阶段：工具族 • 工具族或者工具体 系 • 实现完整的运维流 程 • 大量的操作web化 • 前后端分离，API 这一时期技术上关注的 • 重视总体设计，架构师的作用 • 设计的开放性 • 设计的扩展性（好的设计能自己长大） • 设计的简洁性 • 短周期，快迭代 • 第一版不要太长时间 • 只完成30%的功能 • 最快可以半天发一版 • 平台功能和业务逻辑feature 分离 • 底层平台不能有业务逻辑 • 全API调用 第三阶段：体系和思想 • 是一个体系，而非简 单的工具组合 操作 操作 操作 • 是一个运维思想，区 标准 可控 前置 别于传统运维 化 • 可追溯 • 运维人 • 可监控 员 • 可调整 • 开发人 员 • 自动化是个伪命题 最新的思考：运维自动化本质 • 核心要素：数据+ 流程 发布系统 TTT(运维 流程系统) • 本质目标：是数据 的产生和变化最大 可控 Sysop(IDC 数据 Puppet(配 管理系统） (cmdb， 置管理) 服务树) 再次强调：运维自动化的本质目标 • 使数据的变化最大可控 • 流程的价值是产生和影响数据 争辩 • 难道不应该是以功能为核心吗？ • 功能为是手段，而非目标 • 功能产生垃圾数据 • 难道其目的不是为了提高运维效率吗？ • 数据可控就是最好的效率 举例：一个线上扩容所发生的数据变化 • 结果数据： • 应用的服务器数量及相应属性 • 过程数据： • 操作时间，操作人，操作细节 • 辅助数据： • 监控对象数据，资产数据，预算数据 数据驱