CN120046695A 基于知识蒸馏和动态融合机制的多模态情感分析方法及系统 （华东理工大学）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN120046695A

(43)申请公布日2025.05.27

(21)申请号202510101924.9

(22)申请日2025.01.22

(71)申请人华东理工大学

地址200237上海市徐汇区梅陇路130号

(72)发明人严怀成李家根俞睿吕云凯高生李郅辰王孟吴征天

徐龙郑元义常雨芳

(74)专利代理机构合肥市浩智运专利代理事务所(普通合伙)34124

专利代理师张景云

(51)Int.Cl.

G06N3/096(2023.01)

G06N3/045(2023.01)

G06F18/25(2023.01)

权利要求书2页说明书12页附图2页

(54)发明名称

基于知识蒸馏和动态融合机制的多模态情

感分析方法及系统

(57)摘要

CN120046695A本发明提供一种基于知识蒸馏和动态融合机制的多模态情感分析方法，包括预训练单模态教师模型；利用单模态教师模型指导多模态学生模型学习，并通过交互式知识蒸馏机制，将教师模型的中间层概率分布作为目标，学习模态间相关性和跨模态特性；交互式知识蒸馏包括三个损失函数：首先，计算教师模型和学生模型的输出层输出分布的差异，定义为跨模态知识蒸馏损失；其次，加入基于真实标签的对齐损失