VIPKID 烽火台系统 — 智能化故障监控与预警播报.pdfVIP

自我介绍 杨志强 • 目前是VIPKID基础架构部基础平台组负责人 • 主要职责是基础服务平台的设计、基础服务架构的建设等工作 • 目前基础平台有推送系统、分布式调度系统、实时翻译平台、通 用业务监控、烽火台告警、全链路监控、故障定位与诊断等 智能化故障监控与预警播报 --VIPKID烽火台系统 大米未来科技有限公司 基础架构部 目录 二、智能化故障监控解决方案 • 故障监控解决方案 一、背景分析 • 实时发现持续的大颗粒 三、烽火台系统的运营效果 • VIPKID公司发展历程 • 告警升级 • 告警现状 • 故障规则训练 • 告警的问题 • VIPKID公司业务场景 • 快速解决故障自动自愈 • 烽火台预警播报 • VIPKID故障的背景 • 自动产生故障报告 • 烽火台预警播报设计流程 • 行业的解决方案 • 风险播报的运营 • VIPKID公司故障遇到的问题 • 问题解决的难点 四、智能化运维初涉 • 告警智能化分析 • 应用图谱 • 智能告警设计 01 第一回 背景分析 1.1、VIPKID公司发展历程 1.2、VIPKID公司业务场景 1.3、VIPKID故障的背景 1.4、VIPKID公司故障遇到的问题 1.5、问题解决的难点 1.1、VIPKID公司发展历程 2014 2015 2016 2017 2018 2019 2020 用户千级 用户万级 用户10万级 用户30万级 上课用户60万 课量 多贝 多创新线 同时上课2万 多活 声网 覆盖国家80+ 多业务 aws/ali/ten云 多链路服务商 在线教室 10000机器 python Springmvc springboot 中间件 服务治理全球 业务垂直 单体MySQL 全链路 化服务 框架 深度研发 1.2、VIPKID公司业务场景 • 跨全球：中、美、韩… • 跨多云：AWS 、阿里云、百度云、腾讯云 • 高敏感：单用户级