基于多模态特征融合的人物表情识别算法优化研究.docxVIP

基于多模态特征融合的人物表情识别算法优化研究

目录

一、内容综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

二、多源异构情感感知理论基础与关键技术溯源．．．．．．．．．．．．．．．．3

2.1面部动作编码体系与微表情机理剖析．．．．．．．．．．．．．．．．．．．．．．．3

2.2视觉流特征提取演进．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．6

2.3音频声学特性建模与韵律参数解析．．．．．．．．．．．．．．．．．．．．．．．．10

2.4生理信号在情感计算中的辅助价值．．．．．．．．．．．．．．．．．．．．．．．．14

2.5跨模态对齐难点与融合策略分类学梳理．．．．．．．．．．．．．．．．．．．．18

三、面向细粒度表情的视觉骨干网络轻量化重构．．．．．．．．．．．．．．．20

3.1基于动态卷积注意力的混合骨干架构设计．．．．．．．．．．．．．．．．．．20

3.2局部区域感知增强模块构建与机理．．．．．．．．．．．．．．．．．．．．．．．．22

3.3引入知识蒸馏机制实现模型压缩加速．．．．．．．．．．．．．．．．．．．．．．25

3.4实验配置与消融实验．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．29

3.5复杂光照、遮挡及大姿态下的鲁棒性