人工智能通识教程 课件 第9章-多模态人工智能 .pptx

第九章多模态人工智能主讲教师：丁雪妍人工智能通识基础1

目录2第九章多模态人工智能多模态数据01多模态表示学习02多模态预训练模型03多模态交互技术04多模态人工智能的应用05

目录多模态数据013

1多模态数据1.1多模态数据的类型多模态数据（MultimodalData）是指来自不同模态的数据集合，这些模态可以包括文本、图像、音频、视频、传感器数据等。视觉嗅觉触觉味觉听觉人类通过多种感官感知世界4人工智能系统通过不同的传感器进行环境感知与决策

1多模态数据1.1多模态数据的类型视频模态以动态影像和同步音频组成的信息模态，融合融合图像与时序信息，支持事件理解、动作识别与生成