原创力文档- 1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
- 2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
- 4、该文档为VIP文档，如果想要下载，成为VIP会员后，下载免费。
- 5、成为VIP后，下载本文档将扣除1次下载权益。下载后，不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后，您将拥有八大权益，权益包括：VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传，每下载1次， 网站将根据用户上传文档的质量评分、类型等，对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
2025年第46卷第1期中北大学学报（自然科学版）Vol.46No.12025
（总第219期）JOURNALOFNORTHUNIVERSITYOFCHINA（NATURALSCIENCEEDITION）（SumNo.219）
文章编号：1673-3193（2025）01-0001-09J.NorthUniv.China,Nat.Sci.Ed.,2025,46(1):1-9.
自适应门控解耦特征融合的多模态情感分析
11121
李烽源，蔺素珍，王彦博，李大威，顾梦瑶
（1.中北大学计算机科学与技术学院，山西太原030051；2.中北大学电气与控制工程学院，山西太原030051）
摘要：现有的多模态情感分析研究主要通过不同模态特征的整体交互进行不同模态信息的融合，未考虑不
同模态包含的独有特征以及共有特征之间的联系，导致无法有效分析复杂的情感。针对上述问题，本文提出了
自适应门控解耦特征融合的多模态情感分析模型（AGDF）。首先，利用预训练的BERT模型和Transformer模
型进行不同模态的特征提取。其次，根据不同模态的共有特征相似而独有特征不相似的原理构造对比对，通过
对比学习的方法，将不同模态的特征分解为独有特征和共有特征。然后，根据图像和语音模态在文本模态存在
偏移的原理，设计了一种新的自适应门控机制进行特征融合，将其他模态信息融于文本模态。同时，设计了独
有特征和共有特征的联系图，利用图注意力神经网络进行融合，以平衡模态之间的独有信息和共有信息。最后，
对融合特征进行分类。在数据集CMU-MOSI、CMU-MOSEI上进行了实验，结果显示本文方法比基线方法在
准确率和F1分数上均提高了约1百分点。此外，与其他特征分解方法相比，本文方法的准确率提高了1.23百
分点，F1分数提高了1.37百分点，Corr提高了2.13百分点，MAE降低了4.83百分点。综合结果表明，本文
提出的方法能够更加充分利用不同模态的异质信息，从而有效提高情感识别的效果。
关键词：情感分析；对比学习；图神经网络；多模态信息融合；自适应门控
中图分类号：TP391.1文献标识码：Adoi:10.62756/jnuc.issn.1673-3193.2024.07.0005
引用格式：李烽源，蔺素珍，王彦博，等.自适应门控解耦特征融合的多模态情感分析［J］.中北大学学报
（自然科学版），2025，46（1）：1-9.
LIFengyuan，LINSuzhen，WANGYanbo，etal.Multimodalsentimentanalysisofadaptivegateddecouplingfeature
fusion［J］.JournalofNorthUniversityofChina（NaturalScienceEdition），2025，46（1）：1-9.
MultimodalSentimentAnalysisofAdaptiveGatedDecoupling
FeatureFusion
11121
LIFengyuan，LIN
初级会计持证人
专注于经营管理类文案的拟写、润色等，本人已有10余年相关工作经验，具有扎实的文案功底，尤善于各种框架类PPT文案，并收集有数百万份各层级、各领域规范类文件。欢迎大家咨询！
文档评论（0）