唯品会数据库监控体系建设之路.PDFVIP

唯品会数据库监控体系建设之路 聂超 关于我 • 聂超 • 唯品会主任数据库工程师 • 唯品会上海DBA团队负责人 • 负责唯品会NoSQL、DB工具开发、上海RDBMS等模块 • 微博：@聂风_ • 微信：napoleonu 监控之易 监控之难 监控目的 监控结果 监控内容 监控告警 监控的目的是为了告警！？ 监控目的 状态查看 • 展示当前服务状态 告警响应 • 根据阈值设定，告警问题状态 性能、故障分析 • 故障复盘，问题诊断 容量报告 • 用数据反映服务容量，防止拍脑袋堆机器 风险挖掘 • 挖掘服务潜在问题以及应用使用数据库问题 监控本质 收集数据 存储数据 使用数据 有没有那么一个监控系统能满足全部需求？ 各监控目的特征（我们要做到） 状态查看 • 简单明了，连老板都能看的懂 告警响应 • 速度快，准确率高 性能、故障分析 • 数据详细，精确到秒 容量报告 • 数据易于统计分析 风险挖掘 • 数据易于分析统计 数据库砖家，1000万nvps的监控系统用什么存储比较好？ 监控内容 业务 业务监控 应用服务 应用监控 数据服务 系统监控 操作系统 物理硬件（cpu、io、net、disk、mem… ） 怎么监控 系统监控 应用监控 状态查看 基于Zabbix开发 告警响应 Saiyan、Zabbix 调用分析：Titan 性能、故障分析 sysstat、orzdba、redisstat等等 慢查询分析 容量报告 基于Zabbix开发 风险挖掘 基于Zabbix开发 为什么选择Zabbix • 抽象合理，架构清晰 • MySQL数据存储，利于二次开发和数据分析 • 功能强大——主要指discovery Zabbix有什么问题 • 前端配置、管理同步操作，越来越慢甚至失败 • 单Zabbix server架构，监控能力扩充难 • MySQL未做逻辑拆分和读写分离设计，单实例MySQL没法 实现长久保存 • 状态监控告警响应速度慢，难收敛 状态查看之Zabbix dashboard 状态查看之Zabbix dashboard 告警响应之Saiyan和Zabbix MySQL Redis