阿里搜索监控数据平台的AIOps实践.pdf

阿里搜索监控数据平台的AIOPS实践 演讲人：施立 全球敏捷运维峰会广州站 Agenda 1. kmonitor 概述 2. 数据平台设计 3. AIOPS探索案例 全球敏捷运维峰会广州站 Why 全球敏捷运维峰会广州站 监控数据平台总结 运维数据仓库 基于大数据的 • Metric • 过去，现在，未 • Event 来 基于算法的 • Log • 数据标准统一 • 发现问题 特点 • 数据种类丰富 • 诊断问题 • 面向机器，面向管控 • 优化建议 • 决策建议 目标 基于管控的 Razor + Apack • 可重入 • 助力运维能力升级 Action+Diagnose+管控 • 算法服务框架 • 自我保护 • 助力管控能力升级 • 时序数据分析 • 从手工处理到自愈 • 反馈和自动调优 • 诊断经验沉淀 • 算法持续迭代 全球敏捷运维峰会广州站 kmonitor overview 全球敏捷运维峰会广州站 异构数据源采集 日志ETL : select sum(line[4]) tag(cluster, line[2][4], scene_id, line[3] where line[6] > 3 and line[7][1] != “heart beat”) Log System SDK plugins Promethus Support OpenMetric exposition format 标准，开放，共建 Service Discovery (Armory, Drogo) 全球敏捷运维峰会广州站 时序数据库演进 精于聚合，弱于明细 精于明细，弱于聚合 No Silver Bullet 全球敏捷运维峰