CN111553284B 人脸图像处理方法、装置、计算机设备和存储介质 （武汉大学）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN111553284B(45)授权公告日2025.07.15

(21)申请号202010357461.X

(22)申请日2020.04.29

(65)同一申请的已公布的文献号申请公布号CN111553284A

(43)申请公布日2020.08.18

(73)专利权人武汉大学

地址430061湖北省武汉市武昌区八一路

299号

专利权人清华大学

(51)Int.CI.

GO6V40/16(2022.01)

GO6V20/64(2022.01)

(56)对比文件

CN107610209A,2018.01.19

CN108985220A,2018.12.11

黄诚.基于Candide-3算法的图像中面部替换技术.《计算技术与自动化》.2018,第37卷(第2期),第100-104页.

XiangyuZhu等.High-fidelityPoseand

腾讯科技(深圳)有限公司

(72)发明人王骞周满赵艺李琦李丰廷沈超毕明伟丁守鸿黄飞跃

(74)专利代理机构华进联合专利商标代理有限公司44224

ExpressionNormalizationforface

recognitioninthewild.《2015IEEE

ConferenceonComputerVisionandPatternRecognition(CVPR)》.2015,第787-796页.

审查员康环环

专利代理师王宁

权利要求书4页说明书17页附图7页

(54)发明名称

人脸图像处理方法、装置、计算机设备和存储介质

(57)摘要

CN111553284B本申请涉及一种人脸图像处理方法、装置、计算机设备和存储介质。所述方法包括：获取第一用户的第一人脸图像；基于所述第一人脸图像的人脸特征生成对应的三维投影图像；获取第二用户的第二人脸视频，基于所述第二人脸视频中的各第二人脸图像提取人脸表情特征；将提取获得的各所述人脸表情特征分别融合至所述三维投影图像中进行表情重构，获得合成人脸视频；将所述合成人脸视频投影至三维实体模型进行播放，经过投影的所述三维实体模型用于人脸识

CN111553284B

S202

S202

获取第一用户的第一人脸图像

基于第一人脸图像的人脸特征生成对应的三维投影图像

S206

获取第二用户的第二人脸视频，基于第二人脸视频中的各第二人脸图像提取人脸表情特征

将提取获得的各人脸表情特征分别融合至三维投影图像中进行表情重构，获

得合成人脸视频。

S210

将合成人脸视频投影至三维实体模型进行播放，经过投影的三维实体模型用于人脸识别

CN111553284B权利要求书1/4页

2

1.一种人脸图像处理方法，其特征在于，所述方法包括：

获取第一用户的第一人脸图像；

基于所述第一人脸图像的人脸特征生成对应的三维投影图像；

获取第二用户的第二人脸视频，基于所述第二人脸视频中的各第二人脸图像提取人脸表情特征；所述第二人脸视频，是在第二用户根据指示进行表情响应时录制的响应视频；

基于各第二人脸图像和所述三维投影图像进行模型重构，得到三维的中性人脸模型；

根据所述人脸表情特征对所述中性人脸模型的人脸特征进行表情转换，获得合成人脸视频；

将所述合成人脸视频投影至三维实体模型进行播放，经过投影的所述三维实体模型用于人脸识别。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

识别所述第一人脸图像中的遮挡特征点；

根据所述人脸特征中的特征点计算偏侧角度；

基于所述偏侧角度对所述遮挡特征点进行矫正，得到所述第一人脸图像的人脸特征。

3.根据权利要求1所述的方法，其特征在于，所述基于所述第一人脸图像的人脸特征生成对应的三维投影图像包括：

获取所述人脸特征中特征点对应的二维坐标信息；

基于所述二维坐标信息确定所述第一人脸图像的三维人脸特征；

基于所述三维人脸特征进行三维映射处理，生成所述第一人脸图像对应的三维投影图像。

4.根据权利要求3所述的方法，其特征在于，所述基于所述二维坐标信息确定所述第一人脸图像的三维人脸特征包括：

根据所述特征点估计人脸姿态；

获取预设三维人脸基底映射在二