基于单眼图像的三维人头姿态估计.pdfVIP

基于单眼图像的三维人头姿态估计 阙大顺，赵华波 武汉理工大学信息工程学院，武汉（430063 ） E-mail: zhaohuabo1983@ 摘 要：人脸姿态估计在人脸识别、三维成像等领域中起着非常重要的作用，但是如果在没 有辅助信息的情况下，仅从单张侧面人脸图像直接估计出人头的三维姿态信息是很困难的。 为此，本文提出了一种基于小孔成像的原理及人头旋转模型的三维姿态估计方法。本方法的 核心是，根据投影变换与人脸部七个特征点位置变化的关系，获得其三维姿态信息。实验结 果表明，本方法可实现对单眼图像的人头姿态的有效估计。 关键词：小孔成像；人头姿态；投影变换；单眼图像 0. 引言 人脸姿态估计是图像处理、计算机视觉等实际应用领域中的一个关键问题，针对这个问 题国内外已经有了一些研究成果[1][2][8][9][12] ，然而这些方法大部分需要一些其它辅助信息， 如人脸的正面图像，双目视觉信息，或者人头的三维模型等。但是在实际应用系统中，有时 只有一张人脸图像，无法获得相应的辅助信息，为此，就需要探讨在单幅图像中直接分析人 头姿态的方法。 本文利用人脸的几何特征，基于小孔成像原理和人脸旋转模型，提出了一种新的对单幅 任意姿态下的人脸图像进行姿态估计的算法。 1．人脸姿态估计 在人脸识别的整个系统中, 人脸检测是人脸身份识别的前期工作，它的作用举足轻重。 然而要识别图像中出现的人脸, 首先的一点就是要找到人脸。在多数场景中人的头部并不是 保持始终如一的姿势, 大多数的图像中人的头部都是以多姿态的形式出现的, 所以我们在识 别的过程中必须要考虑到头部姿态的问题。事实上, 头部姿态的问题主要就是指头部在三维 垂直坐标系中绕X, Y, Z 三个轴旋转而造成的面部变化, 其中沿X 轴方向的转动可以通过人 眼以及脸部其他器官相对位置的几何关系来判断, 所以比较容易；然而沿垂直于图像平面的 Y, Z 两个方向的深度旋转则会造成人脸面部信息的部分缺失, 这样就使得姿态问题成为人 脸识别的一个技术难题。目前大多数的姿态估计方法也只是关注于Y方向上的头部旋转。 人脸姿态估计就是计算出相对于正面人脸绕X轴、Y轴、Z轴的转角。由于人头是一个三 维空间的实体，而人脸图像是一组二维数据，由成像原理我们可以认为人脸图像是人头沿Z 轴向X-Y平面投影得到的，我们用X-Y平面表示人脸图像，用α、β、γ分别表示人头沿X轴、 Y轴、Z轴的转角。 如图1所示，由人体测量学的知识可知，人脸基本左右 对称，两只眼睛大小也基本一致，人眼的四个角点在三维空 间上是基本共线的。当人头绕Z轴的转角为0度的时候，这 条线与X-Y 平面平行，在所成的人脸图像上与X轴平行。除 此之外，为了描述人头部的姿态，还需要给出人眼对称中心 的位置，鼻根中心位置，以及嘴中心的位置。如图1所示， 根据以上给出的七个特征点的位置变化，就可直接计算获得 人头三维姿态信息。 图1 人脸部7 个特征点 - 1 - 因为在三维空间上的人头姿态的变化可以分解成绕X轴，Y轴以及Z轴的旋转角度的变 化，所以当获得该三个角度时，就获得了当前人物姿态。 2.1 绕 X 轴的转角 α的计算 绕X轴的转角α，表示了人头的仰俯程度。如图2所示，是绕X轴的转角α的人头姿态示意 图。 Y Y a X Z a