- 7
- 0
- 约2.08万字
- 约 13页
- 2023-07-05 发布于四川
- 举报
本发明提出了一种基于MIT和FSM的多模态情感分析方法,用以解决现有多模态情感分析方法在融合多模态信息时的技术性问题;其步骤为:首先,分别对文本模态数据、语音模态数据和视频模态数据进行预处理,提取文本特征向量、语音特征向量和视频特征向量;其次,将三个特征向量依次进行组合后分别输入MultimodalInteractiveTransformer中进行辅助学习,分别得到三个学习后的特征矩阵;最后,将三个学习后的特征矩阵输入FeatureSoftMapping中映射到统一的语义空间中进行融合,
(19)国家知识产权局
(12)发明专利
(10)授权公告号 CN 113806609 B
(45)授权公告日 2022.07.12
(21)申请号 202111128257.1 G06F 16/65 (2019.01)
原创力文档

文档评论(0)