一种改进的基于正交图象的虚拟人脸合成方法.doc

一种改进的基于正交图像的 虚拟人脸合成方法 阳萌 吴晓斌 汤彦 朱玉凡 汪国平 （北京大学计算机系 北京100871） 摘要： 从一组实拍的人脸图像中合成出具有真实感的虚拟人脸是人脸造型和表情动画中一项重要的工作。给定人脸的正面和侧面正交图像，以及预定义的一般化人脸网格模型，通常采用的合成方法是从图像中抽取出反映人脸形状的特征点，然后将这些特征点以及一般化人脸模型代入统一的约束方程中求解，得到适配后的脸型。目前已提出的形变约束方程普遍存在局限性，本文提出了新的约束方程，并介绍了一种改进后的算法，针对人脸的不同区域采用不同的约束方程分别进行适配，最后使用简化的多角度纹理映射使其更具有视觉真实感。经实验验证，本算法实现简单、快速，合成效果逼真。 关键词： 三维重建；虚拟人脸合成； 约束方程； 基于图像建模 中图法分类号：TP391 IMPROVED REALISTIC 3D FACE SYNTHESIS BASED ON ORTHOGONAL PHOTOS Stewart M. Yang, Xiaobin Wu, Yan Tang, Yufan Zhu, Guoping Wang (Department of Computer Science and Technology, Peking University, Beijing 100871) Abstract: The construction of realistic 3D face model based on a set of photographs is an important, yet challenging task in 3D face model and animation. Provided with frontal and profile facial images, and a predefined generic 3D face model, the prevailing construction method first extracts the feature points from those photos, then uses a constrained equation to deform the generic model in order to fit particular facial geometry, finally performs multi-direction texture mapping to get a realistic personal face. Since most existing constrained equations have their limitations, in this paper we introduce two new constrained equations, and propose a modified deformation method which applies specific equations on different face areas. The simplified multi-direction mapping is used to get a realistic face. Several examples are implemented and verified this method simply and efficient, with promising result. Keywords: 3D reconstruction, 3D face synthesis, constrained equations, image-based modeling 引言 三维人脸造型和动画作为计算机图形学的一个分支，最近受到了人们越来越多的关注。它可以被应用在虚拟现实、复杂的人机界面、电话会议、交互游戏等诸多领域中，具有很强的实用价值。这其中的一个重要课题就是针对特定的人脸建立具有高度真实感的虚拟造型。通常来说，人的脸部特征包括主要脸部器官的形状以及脸部的纹理，因此，在虚拟人脸的合成过程中，最重要的步骤就是定制与特定脸型相匹配的脸部几何模型，然后对适配后的模型进行纹理映射。 虚拟人脸合成按信息来源可分为基于静态图像的合成和基于动态视频的合成两大类。在基于静态图像的虚拟人脸合成中，一种可行的方法是从多个不同的角度对实际人脸进行拍摄，并从拍摄的图像中提取人脸的深度信息直接合成虚拟人脸[5]；此外，也可以依据一般化的人脸模型，通过适当的形变使其与特定脸形相匹配来合成给定人脸。目前在对一般模型进行形变这个方向有较多的研究工作，其中包括匹配人脸特征线后变分插值原