跨模态感知融合中视觉语言逻辑的协同学习框架.docxVIP

跨模态感知融合中视觉语言逻辑的协同学习框架

目录

文档综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

1.1研究背景．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

1.2研究意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

1.3文献综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．6

跨模态感知融合基础理论．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

2.1跨模态数据表示．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

2.2模态间关系建模．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

2.3融合策略与方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．15

视觉语言逻辑建模．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．19

3.1视觉信息提取与分析．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．19

3.2语言信息处理与理解．．．．．．．．．．．．．．．．．．．．．．．．．．