CN119672616A 基于多模态对比学习的深伪视频检测方法 （杭州中科睿鉴科技有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119672616A

(43)申请公布日2025.03.21

(21)申请号202510181090.7

(22)申请日2025.02.19

(71)申请人杭州中科睿鉴科技有限公司

地址310015浙江省杭州市拱墅区祥园路

108号4幢1011室

(72)发明人龚健何覃吕永标

(74)专利代理机构杭州九洲专利事务所有限公司33101

专利代理师沈敏强

(51)Int.Cl.

G06V20/40(2022.01)

G06V10/80(2022.01)

G06V10/774(2022.01)

G06V10/82(2022.01)

权利要求书2页说明书5页附图2页

(54)发明名称

基于多模态对比学习的深伪视频检测方法

(57)摘要

CN119672616A本发明涉及一种基于多模态对比学习的深伪视频检测方法，适用于深度伪造检测领域；该方法包括：将待检测视频输入经训练的视频鉴伪模型，输出该待检测视频的检测结果；视频鉴伪模型包括：视觉编码器，取自经训练的音、视频对比学习模型，用于提取待检测视频中人脸序列的视觉特征；音频编码器，取自经训练的音、视频对比学习模型，用于提取待检测视频的音频特征；跨模态特征融合模块，用于融合视觉编码器提取的视觉特征和音频编码器提取