二维及双模态融的单训练样本人脸识别技术研究.pdfVIP

二维及双模态融合的单训练样本人脸识别技术研究 摘 要 单训练样本人脸识别，是指每人仅存储一幅人脸图像作为训练集去识别姿态、光 照等可能存在变化的人脸图像的身份。由于单训练样本问题给人脸识别系统带来的巨大 挑战及本身具有的重要意义，它已成为人脸识别研究中的一个重要的研究方向。本文分 析了单训练样本人脸识别的研究现状，指出样本扩张和多特征融合是解决单训练样本问 题的有效途径：本文主要在理论和算法上对二维以及双模态生物特征融合的单训练样本 人脸识别进行深入的研究，重点研究二维人脸图像特征提取以及2D人脸与3D鼻型双 模态信息融合。 论文的主要工作有： 1．本文对单训练样本人脸识别的样本扩张技术进行研究，提出了应用于的单训练 样本人脸识别的基于单张正面照片的三维人脸模型合成方法，利用合成的三维人脸模型 生成姿态、光照、表情变化的虚拟人脸图像，以达到扩充训练样本库的目的，从而将单 训练样本问题转化为多训练样本人脸识别。由二维图像恢复对象的三维模型是计算机视 觉领域的一个基本问题，传统的方法需要多幅人脸图像、图像序列，或者需要限定条件 下的立体图像对、正面和侧面图像对等，不利于实际应用。本文提出的算法只需要一幅 正面人脸图像，降低了对使用条件的要求，便于实际应用，具有广阔的应用前景，该方 法合成的三维人脸模型可以满足人脸识别、表情动画、人机交互的需要。基于虚拟图像 的人脸识别实验结果表明，样本扩张法可以有效地解决单训练样本人脸识别中光照，姿 态，表情变化的问题。同时，从生成的三维人脸模型上提取三维鼻型并利用三维鼻型进 行身份识别，实验论证了3D鼻型作为一种新兴的生物特征识别模式的可行性。 2．从提高单一模态——二维人脸识别的识别性能的角度出发，对传统的二维人脸 特征提取算法进行改进，将核技巧和流形学习算法融合，分别针对人脸图像向量和人脸 图像矩阵，提出了非局保投影算法和融合核技巧的二维局保投影算法，从识别率和训练 以及识别时间上对基于人脸图像向量和人脸图像矩阵的两类特征提取算法进行了比较。 实验结果表明提出的方法具备了提取人脸图像的非线性特征和邻域保持特性的两大优 势，因而取得更好的识别效果。 3．对基于图像矩阵的子空间方法进行了较为深入的研究，提出了分块双向加权的 二维主成分分析，分块多投影双向二维线性判别分析、分块二维判别监督局部保留主成 分分析三种特征提取方案。实验结果表明提出的算法都具有比改进前更好的特征提取能 力。说明对算法的改进是有效的，有利于模式识别。 4．从信息融合的角度出发，提出将二维人脸识别和三维鼻型识别在决策层融合以 解决单训练样本人脸识别识别率低，可信度低的新思路，分别针对1：1验证和1：N辨 识两种工作模式提出了基于改进的加权投票法的“并行结构”和基于双层筛选模型的“串 哈尔滨工程大学博士学位论文 行结构”两种融合策略。实验证明，基于2D人脸与3D鼻型信息融合的人脸识别框架是 解决单训练样本问题的有效途径之一。较基于单一模态的身份识别方法有很多优势。首 先，2D信息在获取上非常便捷，可以利用现有很多相关的成熟技术进行处理；同时， 3D信息包含了物体的三维形状属性，与2D信息相互补充，可以较好地解决人脸识别中 饰物和表情变化的问题。 关键词：单训练样本人脸识别；三维鼻型识别；双模态信息融合；特征提取 二维及双模态融合的单训练样本人脸识别技术研究 Abstract Theface witha meansthateach saveone trainingsample persononly recognitionsingle as setto the offace whoseattitudeand call face identity image light trainingrecognize image of