CN107301118-CN201710450900-一种基于日志的故障指标自动标注方法与系统.pdfVIP

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 107301118 A (43)申请公布日 2017.10.27 (21)申请号 201710450900.X (22)申请日 2017.06.15 (71)申请人 中国科学院计算技术研究所 地址 100080 北京市海淀区中关村科学院 南路6号 (72)发明人 任睿　殷岩　程杰超　詹剑锋　 (74)专利代理机构 北京律诚同业知识产权代理 有限公司 11006 代理人 祁建国　梁挥 (51)Int.Cl. G06F 11/34(2006.01) G06F 11/30(2006.01) 权利要求书2页 说明书12页 附图2页 (54)发明名称 一种基于日志的故障指标自动标注方法与 系统 (57)摘要 本发明涉及一种基于日志的故障指标自动 标注系统与方法，包括：根据系统日志的事件等 级筛选出失效/故障日志，根据每条失效/故障日 志的信息内容为每条失效/故障日志分配失效/ 故障类别，根据每类失效/故障类别确定性能指 标数据的有效时间窗口；对每类失效/故障类别 的有效时间窗口对应的所有性能指标数据进行 建模，构建故障指标模型；根据故障指标模型对 性能指标数据进行自动标注性能指标数据是否 为故障指标。本发明可减少人工标注故障指标的 耗时耗力，节省时间和人力资源，减少工作量，方 A 便管理员快速排查系统故障、进行故障诊断，还 8 可根据指标的特征估计出某时间段内系统是否 1 1 1 处于某种故障/失效状态，方便及时采取相应措 0 3 7 施。 0 1 N C CN 107301118 A 权　利　要　求　书 1/2页 1.一种基于日志的故障指标自动标注系统，其特征在于，包括： 日志收集模块、用于从分布式系统或单机计算机系统收集多条系统日志； 指标采集模块、用于采集该分布式系统或该单机计算机系统中的性能指标数据； 数据处理模块、用于首先根据该系统日志的事件等级筛选出失效/故障日志，其次根据 每条该失效/故障日志的信息内容为每条该失效/故障日志分配失效/故障类别，最后根据 每类该失效/故障类别确定该性能指标数据的有效时间窗口； 离线建模模块、用于对每类该失效/故障类别的该有效时间窗口对应的所有该性能指 标数据进行建模，构建故障指标模型； 故障指标标注模块、用于根据该故障指标模型对该性能指标数据进行自动标注该性能 指标数据是否为故障指标。 2.如权利要求1所述的基于日志的故障指标自动标注系统，其特征在于，该指标采集模 块，每隔一定时间间隔采集系统中的性能指标数据，该性能指标数据包括cpu利用率、内存 使用率、磁盘读写带宽、IPC、缓存缺失率。 3.如权利要求1所述的基于日志的故障指标自动标注系统，其特征在于，该数据处理模 块包括： 时间窗口划分模块、通过查询具有同类失效/故障类别的失效/故障日志的时间戳并结 合预先设定的时间窗口阈值，确定各失效/故障类别的有效时间窗口，并通过查找该有效时 间窗口内性能指标的时间戳，得到该有效时间窗口范围内的该性能指标数据。 4.如权利要求1所述的基于日志的故障指标自动标注系统，其特征在于，该离线建模模 块包括： 汇总模块、用于将每类失效/故障类别的所有有效时间窗口所对应的性能指标数据汇 总为故障指标组； 模型构建模块、用于对每个该故障指标组中的性能指标数据，使用一类目标分类算法， 构建出该失效/故障类别的故障指标模型。 5.如权利要求1所述的基于日志的故障指标自动标注系统，其特征在