多模态机器学习算法融合应用研究.docxVIP

多模态机器学习算法融合应用研究

目录

文档概要．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

1.1研究背景与意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

1.2国内外研究现状．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

1.3研究内容与目标．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

1.4研究方法与技术路线．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．11

1.5论文结构安排．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

多模态机器学习理论基础．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．17

2.1数据表示与特征提取．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．17

2.2模态间关联建模．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．23

2.3多模态学习算法框架．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．24

2.4常见评估指标．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2