搜狗智能运维实践.pdf

搜狗智能运维实践 搜狗智能运维实践 搜狗运维现象 •  运维/研发人员比例特别低 •  女生比例高 •  加班少 •  “运维经理”职责 •  核心价值观 运维的高级痛点 •  操心成本 •  烦人成本 •  智商不够用 如何用“智能”化解 •  操心成本——智能熔断系统 •  烦人成本——智能问答机器人“维秘” •  智商不够用——智能故障定位 智能熔断 •  正在快乐的上线呢，怎么报警了 ！ •  自动上线系统太好用了，终于可以同时操作多个 上线了 ！等等，如果代码sb 了几个上线一起出问 题怎么办？ •  为何灰度发布的时候不出问题，正式上线就挂了？ 特定请求引起的故障如何避免 •  没有自动回滚功能的自动上线就是薛定谔的KPI 智能熔断 •  收集信息cpu，mem，io，log解析等 •  本机基于历史情况进行比较 •  信息回传 •  自动上线平台的统一展示 •  触发停止 智能熔断 •  消除毛刺，提高准确率 •  智能化，基于历史数据的大数据分析，像人一样 判断 面对故障，运维的窘境 遭到 发生故障 Dns 攻击 Front web 代码 劫持 Front web Front web Front web 问题 Cache 人为 机架 进程 Music cache Music cache Music cache 操作 掉电 网络 代码 问题 僵死 bug 网卡 数据 流程 Norm Human Inst Dccache 故障 内存