1. 您所在位置：
  2. 网站首页
  3. 文档分类
  4. 行业资料
  5. 国内专利

一种基于多模态特征调节与嵌入表示增强的手势识别方法.pdfVIP

  • 1
  • 0
  • 约1.53万字
  • 约 11页
  • 2023-06-17 发布于四川
  • 举报

一种基于多模态特征调节与嵌入表示增强的手势识别方法.pdf

    本发明公开一种基于多模态特征调节与嵌入表示增强的手势识别方法，包括采集三种不同模态视频和音频，并对视频和音频进行预处理；提取经预处理的视频的图像特征，调节所述图像特征，获得视频表示；提取经预处理的音频模态的音频特征，基于所述音频特征提取音频表示；在视频表示和音频表示上施加triplet约束，构建音频表示和视频表示的关联，获得基于音频模态的手势表示和基于视频模态的手势表示；同时，将视频表示和音频表示还进行联合训练，获得预测手势概率分布，识别手势。本发明通过各视频模态特征之间的相互调节得到冗余性较小

    (19)中华人民共和国国家知识产权局 (12)发明专利 (10)授权公告号 CN 113269068 B (45)授权公告日 2022.04.22 (21)申请号 202110538293.9 G06V 10/82 (2022.01)

    您可能关注的文档

    最近下载

    文档评论（0）

    1亿VIP精品文档

    更多 >

    相关文档

    更多 >