基于模型的美妆类短视频关键帧提取的方法.pdfVIP

  • 2
  • 0
  • 约1.49万字
  • 约 10页
  • 2023-09-02 发布于四川
  • 举报

基于模型的美妆类短视频关键帧提取的方法.pdf

本发明公开了基于模型的美妆类短视频关键帧提取的方法,步骤1、对音频文本进行特征提取任务;步骤2、进行多模态特征提取;步骤3、捕捉视频帧区域序列上下文之间的信息;步骤4、自注意力机制通过对自身信息训练来更新参数;步骤5、对区域图像特征进行加权处理;步骤6、构建公共空间使用对比损失函数对两个不同源信息进行度量学习,跨越不同模态信息间的语义鸿沟,实现跨模态语义相似性度量;步骤7、组成短视频的关键帧摘要;步骤8、使用对比损失函数进行模型训练。本发明方法针对特定美妆类解说短视频主声的特点,考虑视频的多模态

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 116682037 A (43)申请公布日 2023.09.01 (21)申请号 202310519904.4 G06V 10/764 (2022.01)

文档评论(0)

1亿VIP精品文档

相关文档