多模态融合模型优化方法研究.pdf

摘要

人类通过多种感官感知环境与事物,收集信息并传递到大脑整合处理,从而

实现对外部世界的认识、探索与学习。这种多模态感知成为实现人工智能与物理

世界交互的主要方式。因此,多模态融合学习应运而生。它想要模仿人类认知机

制,从不同模态数据学习特征,并进一步融合与推理实现对复杂外部世界的全面

理解。因此,理论上多模态融合应具有超越单模态学习的性能优势。然而,大量

研究表明:多模态融合并不总能超过单模态学习性能,会出现多模态融合退化现

象。究其原因,多模态学习中各模态学习差异、多模态学习中单模态学习不充分

文档评论(0)

1亿VIP精品文档

相关文档