表情识别技术综述概要1.doc

CENTRAL SOUTH UNIVERSITY 《脑与认知科学》调研报告 题 目 学生姓名 学号 专业班级 完成时间  目录 人类表情识别技术 一．摘要： 2 二 前言： 2 三 表情识别 2 人脸检测与定位 2 图像预处理 3 面部表情特征的提取方法 3 表情分类与识别 4 四 应用前景 4 五 面部表情识别的国内外研究情况 4 六 目前存在的难点和问题 5 参考文献： 5 人脸表情识别技术综述 摘要：表情作为一种人机交互的方式，成为研究的热点。基于对表情识别的基本分析，文章重点。关键词：表情识别；特征提取；表情分类 二 前言： 进入21世纪，随着计算机技术和人工智能技术及其相关学科的迅猛发展，整个社会 的自动化程度不断提高，人们对类似于人和人交流方式的人机交互的需求日益强烈。计算机和机器人如果能够像人类那样具有理解和表达情感的能力，将从根本上改变人与计算机之间的关系，使计算机能够更好地为人类服务。表情识别是情感理解的基础，是计算机理解人们情感的前提，也是人们探索和理解智能的有效途径。实现计算机对人脸表情的理解与识别将从根本上改变人与计算机的关系，的意义。人脸表情识别系统主要包括人脸检测与定位人脸检测与定位 人脸检测与定位 可以基于Haar特征的特征提取方法和基于Adaboost的分类方法进行人脸检测与定位 图像预处理 由于受图像采集硬件条件或采集环境条件的影响，采集到的图像会存在对比度不高、亮度不够、图片大小不定等问题，这些问题会对人脸识别产生影响，为了减少这些因素所产生的影响，对图像进行适当的预处理是必不可少的。常用的图像预处理方法包括几何归一化，亮度归一化，直方图均衡化，能量归一化和图像分割。 面部表情特征的提取方法 表情特征提取是表情识别系统中最重要的部分，有效的表情特征提取工作将使识别的性能大大提高，当前的研究工作也大部分是针对表情特征的提取。 目前为止的人脸面部表情特征提取方法大都是从人脸识别的特征提取方法别演变而来，所用到的识别特征主要有:灰度特征、运动特征和频率特征三种阎。灰度特征是从表情图像的灰度值上来处理，利用不同表情有不同灰度值来得到识别的依据。运动特征利用了不同表情情况下人脸的主要表情点的运动信息来进行识别。频域特征主要是利用了表情图像在不同的频率分解下的差别，速度快是其显著特点。在具体的表情识别方法上，分类方向主要有三个:整体识别法和局部识别法、形变提取法和运动提取法、几何特征法和容貌特征法。 整体识别法中，无论是从脸部的变形出发还是从脸部的运动出发，都是将表情人脸作为一个整体来分析，找出各种表情下的图像差别。其中典型的方法有:基于特征脸的主成分分析(prineipalComponentAnalysis，pCA)法、独立分量分析法(IndendenComPonent Analysis，ICA)Fisher线性判别法(Fisher’Linear Discriminants，FL)、局部特征分析 (LoealFeatureAnalysis，LFA)、Fishe诞动法(Fisher^ctions)、隐马尔科夫模型法(HideMarkovModel，HMM)聚类分析法局部识别法就是将人脸的各个部位在识别时分开，也就是说各个部位的重要性是不一样。比如说在表情识别时，最典型的部位就是眼睛、嘴、眉毛等，这些地方的不同运动表示了丰富的面部表情。相比较而言，鼻子的运动就较少，这样在识别时就可以尽量少的对鼻子进行分析，能加快速度和提高准确性。其中最典型的方法就是脸部运动编码分析法(FacialAetionseodesystem，FAes)和MPEe一4中的脸部运动参数法其他的还有局部主分量分析法 (LocalPCA)、Gabor小波法和神经网络法。 形变提取法是根据人脸在表达各种表情时的各个部位的变形情况来识别的，主要的方法有:主分量分析法(PeA)、o汕or小波、运动模板法 (Aetivesh叩 eModel，AsM)[’6]和点分布模型(PointDistributionModel，PDM)法。 运动法是根据人脸在表达各种特定的表情时一些特定的特征部位都会作相应的运动这一原理来识别的。典型的识别方法有:光流法 (OPticalFlow)「’7][’8]和MPEG一4中的脸部运动参数法 (FaceAnimationparameterFAp)。 几何特征法是根据人的面部的各个部分的形状和位置(包括嘴、眼睛、眉毛、鼻子)来提取特征矢量，这个特征矢量来代表人脸的几何特征。根据这个特征矢量的不同就可以识别不同的表情。重要的方法是:基于运动单元(AU)的主分量分析法。 在容貌特征法中，主要是将整体人脸或者是局部人脸通过图像的滤波，以得到特征矢量。常用