模型训练方法以及图文比对方法.pdfVIP

  • 13
  • 0
  • 约4.41万字
  • 约 35页
  • 2023-07-01 发布于四川
  • 举报
本说明书实施例提供模型训练方法以及图文比对方法,其中模型训练方法包括:获取样本文本和样本视频,并输入至图文比对模型;通过图文比对模型中的文本编码器提取样本文本的词单元特征和长句特征,以及通过图文比对模型中的视频编码器提取所述样本视频的图块特征和视频帧特征;根据词单元特征构建短句特征,根据图块特征构建轨迹特征,以及根据视频帧特征构建视频特征;对齐词单元特征和图块特征获得第一对齐分值,对齐短句特征和轨迹特征获得第二对齐分值,以及对齐长句特征和视频特征获得第三对齐分值;基于第一对齐分值、第二对齐分值和

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 116361647 A (43)申请公布日 2023.06.30 (21)申请号 202310242112.7 G06F 40/30 (2020.01)

文档评论(0)

1亿VIP精品文档

相关文档