跨模态对齐方法、装置、电子设备和存储介质.pdfVIP

  • 17
  • 0
  • 约2.27万字
  • 约 19页
  • 2023-08-12 发布于四川
  • 举报

跨模态对齐方法、装置、电子设备和存储介质.pdf

本公开提供一种跨模态对齐方法、跨模态对齐装置、电子设备和计算机可读存储介质。方法包括:获取第一模态信息和第二模态信息,并将第一模态信息分解成多个第一元素,将第二模态信息分解成多个第二元素;根据第二模态信息的第二特征信息,计算每个第一元素与第二模态信息的第一相似度,并根据第一模态信息的第一特征信息,计算每个第二元素与第一模态信息的第二相似度;根据多个第一元素的多个第一相似度和多个第二元素的多个第二相似度,计算第一和第二模态信息的整体相似度;根据整体相似度,对齐第一和第二模态信息。根据本公开,能够强

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 116580391 A (43)申请公布日 2023.08.11 (21)申请号 202310587195.3 (22)申请日 2023.05.23 (71)申请人 北京字跳网络技术有限公司 地址

文档评论(0)

1亿VIP精品文档

相关文档