CN119760637A 一种基于多模态特征融合的疲劳驾驶检测方法及系统 （西安交通大学）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119760637A

(43)申请公布日2025.04.04

(21)申请号202411820583.2

(22)申请日2024.12.11

(71)申请人西安交通大学

地址710049陕西省西安市碑林区咸宁西

路28号

(72)发明人叶洛奇陈曦冯沛华

(74)专利代理机构西安通大专利代理有限责任

公司61200

专利代理师钱宇婧

(51)Int.Cl.

G06F18/25(2023.01)

B60W40/08(2012.01)

G06V20/59(2022.01)

G06V10/40(2022.01)

G06F18/213(2023.01)

权利要求书2页说明书11页附图5页

(54)发明名称

一种基于多模态特征融合的疲劳驾驶检测

方法及系统

(57)摘要

CN119760637A本发明公开了一种基于多模态特征融合的疲劳驾驶检测方法及系统，该方法通过DROZY数据集作为实施例，对该发明方法进行说明。通过对数据集进行预处理，提取出时间上一一对应的图像数据与PSG时序数据，图像与时序数据供后续系统输入使用。对两种模态数据提取浅、中、深层网络的特征信息。得到两种模态的3个特征块维数调整一致后，通过残差卷积注意力模块优化特征信息。再经过权重计算方法得