CN119763199A 图文对比学习的多模态人脸活体检测方法、介质及设备 （华南理工大学）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN119763199A

(43)申请公布日2025.04.04

(21)申请号202411815959.0

(22)申请日2024.12.11

(71)申请人华南理工大学

地址510640广东省广州市天河区五山路

381号

(72)发明人章烈剽康文雄刘坤

(74)专利代理机构广州市华学知识产权代理有限公司44245

专利代理师霍健兰

(51)Int.Cl.

G06V40/40(2022.01)

G06V40/16(2022.01)

G06F18/25(2023.01)

G06F18/22(2023.01)

权利要求书3页说明书9页附图3页

(54)发明名称

图文对比学习的多模态人脸活体检测方法、

介质及设备

(57)摘要

CN119763199A本发明提供了一种图文对比学习的多模态人脸活体检测方法、介质及设备；方法是：采用CLIP网络架构来实现人脸活体检测；CLIP网络架构包括文本编码器、图像编码器和多模态信息融合模块；将真假脸标签扩展出文本提示集，并送入文本编码器获得文本特征；将人脸图像三个模态分别输入到图像编码器提取图像特征；将三个模态图像特征分别与文本特征进行计算余弦相似度得到分类概率；若任一个模态分类概率置信度高，则直接得到检测结果；若三个模