人脸特征点定位及其应用.pptxVIP

人脸特征点定位及其应用第1页/共26页 整体介绍主要内容：当前常用的特征点定位方法，主要介绍AAM。提出在人脸特征定位中基于肤色信息的AAM模型的改进方法。介绍一个肖像画生成系统的设计及实现。人脸特征点定位的概念人脸特征点定位及其应用 －－ 沈育平 P特征点定位系统第2页/共26页 常用的几种特征点 定位算法基于灰度及其变化信息基于可变形模板基于神经网络基于Active Contour Model（Snake，主动轮廓模型）基于Active Shape Model（ASM，主动形状模型）基于Active Appearance Model（AAM，主动表观模型）由于人脸特征复杂性，及图像的多变性，目前仍然没有一个通用的方法第3页/共26页 基于AAM (Active Appearance Model)模型AAM模型常用的几种特征点定位方法由控制参数矢量c控制形状和纹理的变化，调节c可以得到不同的形状和脸部纹理，从而合成不同的人脸调节c可以合成不同的人脸形状脸部纹理轮廓变化模式矩阵 脸部纹理变化模式矩阵第4页/共26页 精细定位粗略定位常用的几种特征点定位方法AAM搜索过程原图像得到粗略定位不断调整C，使合成人脸的灰度与图像灰度差达到最小值得到精细定位由计算公式可得各特征点的位置对每一个比例、位置、旋转角度进行迭代搜索第5页/共26页 常用的几种特征点定位方法AAM搜索时间分析85.1%14.9%有很大的改进空间第6页/共26页 基于肤色信息的AAM改进方法肤色模型人脸特征点定位及其应用 －－ 沈育平 P采用YCrCb彩色空间进行分析 Y反映的是图像的明度，故只Cr,Cb分量分析可以不受图像的亮度影响。肤色像素在Cr-Cb空间中的分布相对很集中，可以用Gauss分布来描述 第7页/共26页 高斯分布基于肤色信息的AAM改进方法人脸特征点定位及其应用 －－ 沈育平 P第8页/共26页 肤色模型所考察的像素和肤色的相似度： 象素的矢量 与高斯分布中心的距离基于肤色信息的AAM改进方法人脸特征点定位及其应用 －－ 沈育平 P计算相似度自适应阈值分割（二值化）第9页/共26页 AAM改进方法AAM的缺陷 对彩色图像进行特征点定位时无疑忽略了色彩信息的作用，可以充分利用肤色信息，使搜索过程加速。一种基于肤色模型的人眼定位方法眼睛在二值图像中的双孔结构基于肤色信息的AAM改进方法眼睛的双孔结构第10页/共26页 人脸特征点定位及其应用 －－ 沈育平 PAAM改进方法基于肤色模型的人眼定位方法基于肤色信息的AAM改进方法计算相似度使用自动阈值分割算法进行二值化对二值图进行去噪音处理，就是在以每一个肤色象素为中心的5*5邻域内统计肤色象素的个数，超过半数时中心点保肤色第11页/共26页 AAM改进方法基于肤色模型的人眼定位方法基于肤色信息的AAM改进方法人脸特征点定位及其应用 －－ 沈育平 P对二值图进行腐蚀运算，去掉各区域之间的细连线用边缘跟踪算法跟踪各区域的轮廓对所有区域的轮廓进行种子填充，得到“掩盖图”将二值图与“掩盖图”求异或，即可得到二值图中的所有孔第12页/共26页 基于肤色信息的AAM改进方法AAM改进方法基于肤色模型的人眼定位方法人脸特征点定位及其应用 －－ 沈育平 P获取候选眼，对每个孔进行检测若满足以下条件则为候选眼：1.平均亮度小于802.包围盒大小超过阈值D获取候选眼对，将候选眼两两配对若符合下列条件，则为候选眼对：1.两包围盒不相交2.两包围盒中心连线斜率不超过阈值3.两包围盒大小不超过一定范围对每个候选眼对进行模板匹配，计算平均眼对灰度与候选眼对所在区域灰度的相似度第13页/共26页 AAM改进方法改进： 确定眼睛位置后，根据五官位置分布的规律性，可以由此确定人脸的位置及方向，从而为AAM模型的搜索提供一个较好的初始位置和大小，并且可以缩小搜索窗口，从而减少AAM的搜索时间 基于肤色信息的AAM改进方法人脸特征点定位及其应用 －－ 沈育平 P第14页/共26页 AAM改进方法基于肤色信息的AAM改进方法用基于脸色信息的人眼定位方法确定人眼根据眼睛和脸部区域的关系获得脸部区域范围，缩小搜索窗口根据人眼位置确定AAM模型的初始搜索姿态使用AAM搜索算法，得到特征点精确定位人脸特征点定位及其应用 －－ 沈育平 P第15页/共26页 基于肤色信息的AAM改进方法性能比较图片原模型定位间改进后模型定位时间改进量占原来的百分比122.66