海量日志分析与智能运维平台.pdf

海量日志分析 与 智能运维 日志易CEO 陈军 提纲   IT 运维分析（ITOA ，IT Operation Analytics ）   智能运维 （AIOps ，Algorithmic IT Operations ）   日志的应用场景   日志搜索分析引擎   日志易的一些用例 Copyright © 2016 北京优特捷信息技术有限公司 IT 运维分析 ª  从 IT Operation Management (ITOM) 到 IT Operation Analytics (ITOA) ª  大数据技术应用于IT运维 ，通过数据分析提升IT运维效率 •  可用性监控 •  应用性能监控 •  故障根源分析与预警 •  容量规划 •  安全审计 ª  Gartner估计 ，到2017年15%的大企业会积极使用ITOA ；而在 2014年这一数字只有5% Copyright © 2016 北京优特捷信息技术有限公司 智能运维 ª  AIOp (Algorithmic IT Operation) ª  把机器学习、人工智能应用在运维领域 Copyright © 2016 北京优特捷信息技术有限公司 智能运维架构 ª  数据采集 ：日志、事件、性能指标 ª  数据存储 ：非结构化数据存储 ª  数据分析 ：深度分析、实时分析 ª  数据展现 ：可视化、自然语言 Copyright © 2016 北京优特捷信息技术有限公司 IT运维的进化 ITOM ITOA AIOps IT运维管理 IT运维分析 智能运维 •  ITIL •  大数据技术 •  机器学习 •  人工智能 Copyright © 2016 北京优特捷信息技术有限公司 故障处理的进化 事后根源追溯 事中及时告警 事前预警 •  数小时、数天 •  秒级延时 •  预测故障 •  人工判断异常 •  异常自动检测 •  容量规划 Copyright © 2016 北京优特捷信息技术有限公司 ITOA 的四种数据来源 ª  机器数据（Machine Data ） •  日志 ª  通信数据（Wire Data ） •  网络抓包 ，流量分析 ª  代理数据（Agent Data ） •  在 .NET/Java 字节码里插入代码 ，统计函数调用、堆栈使用 ª  探针数据（Probe Data ） •  在各地模拟ICMP ping、HTTP GET请求 ，对系统进行检测 Copyright © 2016 北京优特捷信息技术有限公司 ITOA 四种数据来源使用占比 100%