构建基于AIOps的智能监控体系.pptx

构建基于AIOps的智能监控体系目录 CONTENT美图的业务场景智能一体化监控体系 数据驱动下的优化案例AIOps的应用与思考1234 Part 1 美图业务场景 让短视频更好看美图的产品矩阵MAU:美图电商 达4.81亿2017年推广多款电商类 服务美图美妆， 美图定制美图广 告等美拍直播2016年1月美拍推出 直播功能 美图手机2015年11月首款高端系列智能手机V4 美拍 MAU:达4.5亿2014年2月首款视频社区应 用 美颜相机2013年6月基于美图秀秀， 美 推出专用于自拍美颜应用图 秀 秀2011年2月推出收款移 动端应用2013MAU:突破1亿2011美图业务全球化布局美拍业务后端业务架构部署架构IOSAndroidWebCDNAPI关系频道短视频评论赞直播喜欢用户分享LVS美图云Nginx应用服务平台服务服务层PUSH广告LBS 搜索 推荐基础服务Feed后端资源MySQLMCRedisRedisCounterKafkaMongodb美图云大规模云端实时处理能力大规模图片和视频存储云存储云处理云直播美图云百万级同时在线支撑每天万场以 上直播云推送美图特色融合云服务+ 自研云服务：可控性和可定制性+ 公有云服务：可扩展性和容灾性云IM互动式弹幕IM APP Part 2 智能一体化监控体系让短视频更好看解决监控三大核心问题监控的目标可靠性可用行用户体验全快准如何解决监控：快，准，全？打造智能一体化监控体系端到端的全维覆盖端到端的监控：一体化监控矩阵用户端监控 流媒体监控 业务监控 服务监控基础资源网络质量异常直播推流/拉流访问量错误后端资源设备资源监控内容DNS劫持点播拉流Profile监控LVSDNS网络设备监控崩溃卡顿主播监控分布耗时LB (Nginx)专线监控请求吞吐量视频监控Trace监控进程端口TCP监控返回码直播/点播统计A/B Test监控SLA体系硬件故障响应时间CDN质量监控日志中心产品运营指标Ping监控错误率CDN打分容器监控慢请求CDN日志组合分析自研流媒体监控 自研CDN监控ELK Prometheus Open-falcon基于流式处理的大数据监控套件ZabbixInfluxDB套件第三方拨测第三方APM服务端质量监控体系用户质量监控体系基于日志的大数据分析体系统一告警平台UAP核心目标解决报警风暴：收敛核心功能与运维系统集成统一报警接口定制化的收敛规则告警区分等级不同等级绑定不同告警方式UDP-告警收敛中心美图 UAP : 告警平台 + 事件平台入库上报监控系统告警接口告警数据提取告警暂停规则是否暂停运维树业务服务业务 实例服务收敛规则合并收敛用户实例个人信息容器平台 项目 集群 容器分组信息生成事件确定接收 人绑 定美图云-智能监控一体化解决方案 Part 3 数据驱动下的 优化案例让短视频更好看基于公有云的美拍直播CDN播放源站CDN推流公有云SDK自研美颜SDKRTMP推流TCP边缘加速接收RTMP流转推到CDN转码分片存储 截图服务CDN边缘分发节点调度公有云SDKRTMP/HTTP/HLS拉流自研推流SDK APM软硬编、H264/H265/ACCPCM/YUV美颜、AR、水印等RTMP状态实时汇报监控中心采集处理编码推流SDK弱网优化: 动态码率、丢帧策略等流媒体中心流媒体监控中心推流SDK状态实时汇报拉流SDK监控API状态监控大数据处理报警阈值预警反馈机制influxDB数据处理和聚合可视化后台Grafana流实时状态直播流帧率时序图流媒体-多维度展示数据驱动下的优化SDK策略优化 (策 略在线配置化)基于阈值自动切 换CDN节点Failover机制公有云打分机制A/B Testing告警流实时状态分析用户弱网分析推动CDN优化基于监控切换CDN节点 Part 4 基于AIOps的应用与思考让短视频更好看AIOps的应用场景异常检测异常检测-数据Pipeline异常检测异常检测-模型实现异常检测异常检测-模型函数文本处理 聚类AIOps的更多场景文本处理 分类企业如何应用AIOps如何切入AIOps自动化是基础 开源组件的结合《企业级AIOps 实施建议》未来展望告警关联 根因分析 更多学件现状门槛较高缺少完整的解决方案美拍监控未来：更智能化 更自动化THANK YOU！