CN119759797A 基于值函数强化学习的嵌入式软件时序异常检测方法 （浙江数新网络有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119759797A

(43)申请公布日2025.04.04

(21)申请号202510267696.2

(22)申请日2025.03.07

(71)申请人浙江数新网络有限公司

地址311121浙江省杭州市余杭区仓前街

道文一西路1218号7号楼201室

(72)发明人张志杰原攀峰陈廷梁

(74)专利代理机构北京智征启营专利代理事务所(特殊普通合伙)16250

专利代理师付祥林

(51)Int.Cl.

G06F11/3668(2025.01)

G06N3/092(2023.01)

G06N3/0442(2023.01)

权利要求书3页说明书10页附图3页

(54)发明名称

基于值函数强化学习的嵌入式软件时序异

常检测方法

(57)摘要

CN119759797A本发明提供基于值函数强化学习的嵌入式软件时序异常检测方法，涉及异常检测技术领域，包括通过获取时序数据并划分时序片段，构建状态空间矩阵，采用长短时记忆网络提取特征向量，基于深度神经网络生成Q值函数网络，构建基于马氏距离的奖励函数，采用深度Q学习算法训练网络并优化参数，最终实现异常检测。本发明能够有效捕捉时序数据的长期依赖关系，提高异常检测的准确性，降低误报率，具有较强的泛

CN119759797