海量日志搜索分析引擎日志易-myqcloudcom.PDFVIP

海量 日志搜索分析引擎 ： 日志易 Copyright © 2017 北京优特捷信息技术有限公司 机器数据的痛点 - 处理效率低 - 散落在各台设备 - 延时大 散 - 被覆盖、删除 - 登陆各台服务器 ，用Linux命令或脚本查看 慢 乱 - 提取、分析困难 - 事故根源分析困难 难 - 不同系统关联分析困难 - 来源多样 ：服务器、网络设备、系统软件、应用软 件 - 格式多样 ：自由文本 ，非结构化数据 Copyright © 2017 北京优特捷信息技术有限公司 日志管理系统的进化 日志1.0 ： 日志2.0 ： 日志3.0 ： 数据库 Hadoop 或 NoSQL 实时搜索引擎 • 固定的schema无法适应 • 需要开发成本 • 实时 任意 日志格式 • 批处理 ，实时性差 • 海量 • 无法处理大数据量 • 不支持全文检索 • 全文检索 Copyright © 2017 北京优特捷信息技术有限公司 可编程的实时日志搜索分析引擎 （fast big data ） 快 ：日志从产生到搜索 实时分析 分析只有几秒的延时 大 ：可以每天处理TB级 海量 日志 海 量 灵活 ：可以搜索、分析任 IT Google for 何文本格式的 日志 Copyright © 2017 北京优特捷信息技术有限公司 日志分析的价值 运维监控 采集 业务分析 解析、索引 统计分析 用户数据分析 告警 搜索 Ø 运用大数据技术处理IT运维产生的海量数据