一种基于多关系感知推理的图像文本匹配方法.pdfVIP

  • 2
  • 0
  • 约6.76千字
  • 约 7页
  • 2023-06-17 发布于四川
  • 举报

一种基于多关系感知推理的图像文本匹配方法.pdf

针对图像文本匹配任务,本发明设计了一种基于多关系感知推理的图像文本匹配方法,涉及计算机视觉和自然语言处理两个领域。充分挖掘视觉和文本模态的特征,并将不同模态的特征进行对齐是攻克图像文本匹配任务难点的关键。合理利用图卷积神经网络有利于提升模型的性能表现,本发明基于图卷积神经网络,设计了针对图像的多关系感知推理模块,关注图像的语义关系和空间位置关系,提取了更加丰富的视觉特征表示,实现了与文本语义信息更好的对齐;再结合基于BERT‑GRU的文本编码器,能够全面地表达句子的深层语义信息,实现与图像视觉表

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 114117104 A (43)申请公布日 2022.03.01 (21)申请号 202010891854.9 (22)申请日 2020.08.28 (71)申请人 四川大学 地址 61

文档评论(0)

1亿VIP精品文档

相关文档