一种基于注意力机制增强的无监督跨模态检索方法.pdfVIP

  • 1
  • 0
  • 约1.72万字
  • 约 16页
  • 2023-04-23 发布于四川
  • 举报

一种基于注意力机制增强的无监督跨模态检索方法.pdf

本发明属于人工智能智慧社区应用技术领域,涉及一种基于注意力机制增强的无监督跨模态检索方法,先增强图像的视觉语义特征,再聚合不同模态的特征信息,并将融合后的多模态特征映射到同一语义特征空间,然后基于生成对抗网络对图像模态和文本模态特征分别与多模态融合后的同一语义特征进行对抗学习,对齐不同模态的语义特征,最后将生成对抗网络对齐后的不同模态特征分别生成哈希码,并进行模态内特征与其哈希码相似性度量学习与模态间特征与其哈希码相似性度量,减少了不同模态之间的异质语义鸿沟问题,增强了不同模态特征间的依赖关系,

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 113971209 A (43)申请公布日 2022.01.25 (21)申请号 202111578275.X G06F 16/51 (2019.01)

文档评论(0)

1亿VIP精品文档

相关文档