基于双目视觉的三维人脸重建的研究-机械电子工程专业论文.docxVIP

I万方数据 I 万方数据 摘要 摘要 三维人脸模型作为一个极具趣味性和特殊性的人类特征，在很多领域有着广泛的 应用，如三维人脸识别、三维游戏、视频会议和医疗等。由于人脸的复杂可变性，三 维人脸重建一直是一个非常具有挑战性的课题。虽然三维人脸重建技术已经取得一定 的成果，但大多是基于昂贵的设备或者对使用场合要求很高，而基于普通摄像机图像 的三维人脸重建技术由于具有廉价、使用方便、自动化程度高等优点，近些年倍受关 注。 本文针对三维人脸模型在人脸识别上的应用，基于人眼双目视觉原理对三维人脸 重建展开研究，目的是建立一个便捷有效的三维人脸重建系统。主要包括立体匹配和 区域生长技术、摄像机标定、图像校正、重建区域提取、三维人脸重建等。 1) 在摄像机标定和图像校正方面，本文深入研究了目前常用的摄像机标定方法， 实现了张正友摄像机标定方法并利用标定的参数对摄像机图像进行校正并取 得了很好的效果。 2) 在人脸重建区域提取技术方面，实现了基于 Adaboost 算法和基于人脸肤色模 型融合的人脸检测方法，并在此基础上进一步利用形态学技术提取三维人脸 重建区域。此外，提出了一种用于保证图像校正后不受人脸重建区域提取影 响的坐标约束方法。 3) 在立体匹配和区域生长方面，对目前常用的局部立体匹配算法和全局立体匹 配算法、基于像素视差约束的区域生长策略和基于算法的区域生长策略进行 深入研究，对 Realtime 立体匹配算法进行了改进，在叠加匹配代价中增加了 相邻像素灰度差值和在交叉过程中使用不同的匹配代价，保证了种子像素的 可靠性；此外，基于 Realtime 阈值，提出了一种融合阈值排序和置信度排序 的区域生长策略，在生长阶段只利用 WTA 匹配算法结合 SSD 匹配代进行生 长，既保证了生长区域的精度，又降低了整体算法耗时。 4) 最后，研究了三维人脸重建中的纹理映射技术，基于 Visual2008、OpenCV 和 OpenGL 设计了简单有效的算法实验平台，并通过实验验证了相关算法的 有效性，实现了基于双目立体摄像机的逼真三维人脸重建。 关键词：双目视觉; 摄像机标定; 人脸检测; 立体匹配; 区域生长; 三维人脸重建 II万方数据 II 万方数据 Abstract Abstract 3D(three-dimensional) face model as a very interesting and particularity part of human characteristics, has been a wide range of applications in many fields, such as 3D face identification, 3D games, video conferencing and medical. As its complexity and variability, generation of one lifelike human face model is a very challenging task, by now, most of the techniques are based on the use of expensive equipments or demanding special situations. With the development of computer vision technique and camera calibration technique, 3D face reconstruction based on stereo vision as a cheap, easy to use, high automation method has been attracted more and more attention in recent years. In this paper, considering the application in face recognition, a method of 3D face reconstruction based on binocular vision is studied to build a convenient and effective system of 3D face reconstruction, which include stereo matching, region growing techniques, camera calibration, image correction, reconstruction region extraction and 3D reconstruction.