面向多模态视觉问答任务训练策略的研究.pdf

面向多模态视觉问答任务训练策略的研究.pdf

摘要

随着互联网及人工智能等高新技术的发展,多模态数据在信息传播中的地位

日益重要,视觉问答作为典型的融合多模态人工智能任务得到了广泛的关注。众

所周知,在深度学习领域合适的训练策略对于模型的成功训练和性能优化至关重

要,并且由于多模态问答任务的特殊性,训练策略对视觉问答模型性能的影响尤

为突出。一方面是因为来自不同模态的图像与问题之间天然的存在着语义鸿沟,

这阻碍了图像与问题中相同语义信息间的直接交互,从而存在语言先验以及答非

所问的情况,另一方面视觉问答任务数据分布的不均衡,导致模型学习偏差,对

文档评论(0)

1亿VIP精品文档

相关文档