淘宝数据采集分析工具——Tsar.PDF

Tsar 淘宝数据采集⼯具 介绍 - / 阿⾥巴巴核⼼系统部⻔李克空⻅ 2013.8.20 主要内容 •  背景 •  Tsar的使⽤ •  Tsar的架构 •  Tsar的模块开发 •  其它 背景 •  SAPE关注点   当前 历史状态  报警和监控信息  数据分析 •  现有的⼯具   top/sysstat/ss 系统： 等  应⽤：nginx_status/snmp等  监控：nagios/cacti等 •  不⾜  扩展性差  数据没有和业务平台打通 背景 •  Tsar定位  为集团提供统⼀的系统和应⽤信息采集  扩展⽅便，发布简单  数据查看和汇总 •  使⽤情况  第三⽅模块数⺫达到20+,nginx/trafficserver  基础软件，部署10w+，监控平台统⼀接⼊ •  开源 使⽤介绍 •  配置⽂件  /etc/tsar/tsar.conf ，⽀持include •  指定模块  mod_name on parameter •  指定输出  output_stdio/db/nagios_mod_name •  mysql相关  指定服务器地址端⼝ •  nagios相关  nsca配置，服务器地址，间隔，阈值等 使⽤介绍 •  基本模块   cpu/mem/load/tcp/traffic/io/disk 系统： 等  应⽤：nginx/trafficserver/lvs/haproxy等   /alibaba/tsar/tree/master/modules •  指定属性查看数据  指定模块  指定间隔时间  指定字段  指定项⺫  指定⽇期-n/-d  指定⽂件 使⽤介绍 •  实时信息查看  Live模式，实时查看数据，可指定模块，可指定 间隔秒数 使⽤介绍 •  历史信息查看   n 指定模块，间隔分钟，查看 天的数据 使⽤介绍 •  item 查看多 模块  ⽐如多块磁盘   -m 项⺫汇总数据， •  查看最近⼀次数据信息  --check ，输出最近⼀分钟数据，⽤于监控 使⽤场景 •  输出到Mysql  output_db_addr ip:port   tsar2db tsar 服务器安装 ⽤来收集 的数据 •  输出到Nagios  Tsar配置好nsca和报警阈值，nagios添加被动 监控项⺫ 架构介绍   功能划分 模块 Tsar主框架