基于人体运动跟踪的情感识别研究.docVIP

基于人体运动跟踪的情感识别研究 　　摘要：人体运动跟踪是计算机视觉和人机交互融合的一个重要研究方向，从视频中跟踪、获取人体数据，重建人体的三维运动。该文提出一种基于人体运动跟踪结合面部表情图像以及支持向量机的多分级融合的识别方法，把语音识别的输出结果和图像识别的输出结果进行融合，最终产生带情感标记的识别结果。 　　关键词：人体运动跟踪；三维重建；特征融合；情感识别 　　中图分类号：TP182文献标识码：A文章编号：1009-3044(2011)11-2649-03 　　The Research of Affective Recognition on the Human Motion Tracking 　　DING Yi1,2, FU Xian1 　　(1.The College of Computer Science and Technology, Hubei Normal University, Huangshi 435002 ,China; 2.College of computer science and technology, Huazhong University of Science and Technology, Wuhan 430074, China) 　　Abstract: Tracking of human motion is an important research area which combines computer vision and Man-Machine Interaction. The focus of the research is in detecting and tracking figures in videos, capturing and reconstructing the human motion, and then describing and interpreting the human behavior. In this paper, a recognition method for multiple classifiers is proposed, which combines human motion tracking and an Eigen face method with support vector machine(SVM). and fuse ISR results and FER results by marking punctuation and achieve the recognition results. 　　Key words: human motion tracking; three dimensional reconstruction; feature fusion; affective recognition 　　在交流中检测并理解他人的情感状态是人类智能的一种核心能力。这种能力在人的社会生活中是不可或缺的。但是在人与计算机的交流中，情感的作用在很长的一段时间都被忽视了。能够感觉到悲伤、高兴等情感并且根据这些情感调整自己行为的人机交互系统将会使计算机更加自然、高效和更加值得信赖。具有情感识别能力的人化人机交互将使计算机易于使用，并使使用者更愉快，因而可提高生产效率。目前已经有学者研究试图让计算机根据脸部表情和声音特征来理解人的情感，但是还很少有人研究根据人体运动特征识别情感。研究表明，人体运动特征中不仅包含丰富的情感，而且包含有一些面部表情和声音中所没有的情感信息。因此根据人体运动特征识别情感具有重要的意义和不可替代的地位。 　　1 国内外发展现状与趋势 　　通过情感识别来设计更加自然的、人化的人机交互系统是从Picard提出情感计算[1]的概念开始的。20多年来，研究者们从人的脸部表情和声音特征研究情感识别的方法，取得了大量的研究成果。最初的情感识别研究是从面部表情开始的，对面部表情的分析，已经形成了一个标准的面部表情编码系统（Facial Action Coding System）。面部表情编码系统将面部表情特征通过面部关键部位的60多种动作单元来描述。研究者们通过先提取出这些动作单元构成面部表情特征[2]，再利用机器学习方法从这些特征中挖掘出情感模式来识别人的情感状态[3]。基于声音特征的情感识别也取得了大量研究成果[4]，识别的步骤和基于面部表情的情感识别类似，也是利用机器学习方法从声音特征中学习出情感模式[5]。近年来一些研究者开始将面部表情特征和声音特征结合在一起设计出基于多模特征的情感识别方法[6]。近年来有的研究者尝试将一些简单的静态的身体姿态特征（如手放的位置）和面部表情结合起来识别情感，结果表