《大众点评网监控系统剖析.》.pdfVIP

大众点评网 监控平台剖析 吴其敏 @QCon Hangzhou 2012 qimin.wu@ 12年10月29日星期⼀ 大众点评网 • 2003年4 月成立于上海，是中国领先的本地生活消费平台 • 覆盖全国2300座城市，180万家商户，2200万条消费者点评 • 月活跃用户数5400+万，移动客户端独立用户数4500+万 • 500+台应用服务器，300+名技术人员 （数据截止2012年第三季度） 12年10月29日星期⼀ Agenda • 介绍 • 报表 • 设计 • 未来 12年10月29日星期⼀ 监控系统 • MRTG, Cacti, Nagios, Ganglia, Zabbix, ... • Dapper(Google), Scribe(Facebook), Zipkin(Twitter), CAL(eBay), ... • CAT(Dianping) 12年10月29日星期⼀ 12年10月29日星期⼀ 目标 • 故障诊断 • 跨越边界访问(Across Boundary Activity) • 跨网络：URL, HTTP, RPC, SQL, Message, Cache, ... • 跨角色：浏览器/ 网络/应用服务器, Nginx/Tomcat, Controller/Model/View, ... • 跨语言： Java call Scala, PHP call Java, ... • 跨所有权：公共组件, 规则引擎, ... • 状态记录（Status） • 系统状态：CPU, Memory, Thread, Disk, Network, GC, Load, ... • 业务状态：参数, 结果, ... • 业务统计 • 计数/计时：Page, Service, Cache, Database • 分布：浏览器, IP, 登陆状态, 缓存命中, ... • A/B 测试, 性能测试, ... • 系统优化：响应时间, 依赖耦合, 嵌套调用 • 容量规划：数据库, 应用服务器 12年10月29日星期⼀ 部署 12年10月29日星期⼀ 特性 • 实时处理，全量数据，侧重应用监控 • 轻量级，低开销 • 无中心化设计，支持水平扩展 • 通用API ，支持各种业务 • 丰富的分析、统计报表 12年10月29日星期⼀ 目前