面向链接预测的交互式多模态融合方法及装置.pdfVIP

  • 2
  • 0
  • 约1.78万字
  • 约 14页
  • 2023-05-05 发布于四川
  • 举报

面向链接预测的交互式多模态融合方法及装置.pdf

本发明提供一种面向链接预测的交互式多模态融合方法及装置,方法通过获取待预测知识图谱,包括结构化模态、可视化模态和文本模态;分别提取结构化模态、可视化模态和文本模态的高层次特征信息,得到结构化模态嵌入表示、可视化模态嵌入表示和文本模态嵌入表示;对结构化模态嵌入表示、可视化模态嵌入表示和文本模态嵌入表示进行聚合,通过双线性矩阵计算得到多模态嵌入表示;分别通过各个不同的表示预测目标实体,得到结构化预测结果、可视化预测结果、文本预测结果和多模态预测结果;调整各个预测结果的权重,得到目标预测结果,通过多模

(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 114297402 A (43)申请公布日 2022.04.08 (21)申请号 202111553153.5 (22)申请日 2021.12.17 (71)申请人 清华大学 地址 10

您可能关注的文档

文档评论(0)

1亿VIP精品文档

相关文档