基于对偶一致网络的声源定位与声源分离的方法和系统.pdfVIP

  • 2
  • 0
  • 约1.65万字
  • 约 11页
  • 2023-07-07 发布于四川
  • 举报

基于对偶一致网络的声源定位与声源分离的方法和系统.pdf

本发明公开了一种基于对偶一致网络的声源定位与声源分离的方法和系统,属于图像‑音频多模态领域。主要包括如下步骤:1)获取音视频数据集,选取一对属于不同声音域的视频,提取对应的单源音频和图像信息,并计算混合音频。2)对音频和图像分别进行特征编码,得到音频和图像特征。3)将混合音频和图像特征一同送入对偶一致网络的声源分离模块,分离出单源音频。4)将图像和对应的音频特征送入对偶一致网络的声源定位模块,得到图像中的发声物体。相比于传统的声源定位与声源分离任务中的方法,本发明将两个任务视为对偶任务,用同一个

(19)中华人民共和国国家知识产权局 (12)发明专利 (10)授权公告号 CN 113850246 B (45)授权公告日 2022.02.18 (21)申请号 202111441409.3 (56)对比文件 (22)申请日 2021.11.30

文档评论(0)

1亿VIP精品文档

相关文档