面向复杂场景的生成式多模态大模型对齐与推理优化.docxVIP

面向复杂场景的生成式多模态大模型对齐与推理优化

目录

内容概括．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

1.1研究背景．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

1.2研究意义．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．4

1.3论文结构安排．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．5

相关理论和技术综述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

2.1多模态学习基础．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．7

2.2生成式大模型概述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．8

2.3对齐与推理的理论框架．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．10

方法论和实验设计．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

3.1实验数据集介绍．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．12

3.2模型架构与训练策略．．．．．．．．．．．．．．．．．．．．．．．．．．