自发表情识别综述.docVIP

自发表情识别方法综述* (南昌大学信息工程学院，南昌330031) 摘要： 表情识别研究热点正从摆拍表情转移到自发表情，本文介绍了目前自发表情识别研究的现状与发展水平，详细阐述了自发表情识别研究的内容和方法，以及自发表情识别研究的关键技术，旨在引起大家对此新兴研究方向的关注与兴趣，从而积极参与对自发表情识别问题的研究，并推动与此相关问题的进展。 关键词：表情识别；自发表情；特征提取 中图分类号: ****　　　 文献标志码: A 文章编号：（作者可不填） doi:10.3969/j.issn.1001-3695 (作者可不填) A Survey of Spontaneous Facial Expression Recognition （Information and Engineering college, Nanchang University, Nanchang, 330031,China) Abstract: Research Focus on facial expression recognition transforms from the posing expression into the spontaneous expression. The actuality and the developing level of spontaneous facial expression recognition at the present time is introduced in this paper, and the key technology on the research of spontaneous facial expression recognition are paid particular attention to. This paper aims to arouse people’s attention and interests into this new field, to participate in the study of the spontaneous facial expression recognition problems actively, and to achieve more successes correlated to this problem. Key words: facial expression recognition; spontaneous facial expression; Feature extraction 0引言 表情识别被视为未来情感人机交互的重要技术[1]，吸引了国内众多高校和科研机构参与研究[2-6]。但目前国内外研究中比较常用的表情数据库中的人脸表情大都固定为正面，任务仅限于识别Ekma提出的六种基本表情（愤怒、高兴、悲伤、惊讶、厌恶和恐惧）。这不仅与实际表情不相符，而且忽视了真实表情中特有的脸部肌肉形变与头部运动之间的时空相关性。谷歌申请的新一代表情识别专利，挤眉弄眼方可解锁手机。荷兰开发的诺达斯（Noldus）Oulu-CASIA NIRVIS数据库 Oulu-CASIA NIRVIS数据库[18]是以视频的方式诱发的包含近红外光和可见光的自发表情数据库，该数据库中包含80名被试者，该数据库包含6类基本表情。 ?SPOS数据库 SPOS数据库[19]是以观看电影片段的方式诱发的可见光和接近红外光的集自发表情和人为表情的自发表情数据库，该数据库包含7名被试者（4名男性和3名女性），该数据库中的图像序列是从中性帧开始并以夸张帧结束，该数据库包含6类基本表情。 表1 自发表情数据库简介 数据库及文献 诱发方式 数据规模 情感描述 Sebel 04[17] 视频 28被试 4类表情 RU-FACS(RU) 04[14] 接受采访 100被试 33动作单元 UT Dallas 05[15] 采访 299被试 6类表情+4其他 MMI 12[13] 视频 29被试 6类表情 VAM 08[12] 电视访谈节目 20被试 6类表情等 USTC-NVIE 10[10] 视频 100+被试 6类表情 AAI 04[16] 采访 60被试 6类表情等 Oulu-CASIA NIRVIS11[18] 视频 80被试 6类表情 SPOS11[19] 观看电影片段 7被试 6类表情 2.自发表情识别研究方法比较 通常自发表情识别问题的解决需要经过人脸的检测与定位、特征提取、特征降维和分类识别的过程（如图1所示)，下面将按照这样的顺序，分别来比较现有系统所采用的方法以及各自