基于人脸表情特征的情感交互系统.doc

基于人脸表情特征的情感交互系统* 红，彭 徐 力 ( 江南大学 物联网工程学院，江苏 无锡 214122) 摘 要: 设计了一套基于人脸表情特征的情感交互系统( 情感虚拟人) ，关键技术分别为情感识别、情感计算、情 感合成与输出三个方面。情感识别部分首先采用特征块的方法对面部静态表情图形进行预处理，然后利用二维 主元分析( 2DPCA) 提取特征，最后利用多级量子神经网络分类器实现七类表情识别分类; 在情感计算部分建立 了隐马尔可夫情感模型( HMM) ，并且用改进的遗传算法估计模型中的参数; 在情感合成与输出阶段，首先采用 NURBS 曲面和面片相结合的算法，建立人脸三维网格模型，然后采用关键帧技术，实现了符合人类行为规律的 连续表情动画。最后完成了基于人脸表情特征的情感交互系统的设计。 关键词: 情感虚拟人; 二维主元分析; 多级量子神经网络; 隐马尔可夫情感模型 中图分类号: TP391 文献标志码: A 文章编号: 1001-3695( 2012) 03-1111-05 doi: 10． 3969 / j． issn． 1001-3695． 2012． 03． 085 Emotional interaction system based on characteristics of facial expression XU Hong，PENG Li ( School of Internet of Things Engineering，Jiangnan University，Wuxi Jiangsu 214122，China) Abstract: This paper presented a systematic design method for the emotion interactive system ( virtual emotional human ) based on the characteristics of facial expression． The key technologies involved emotion recognition，affective computing，emo- tion synthesis and output． In the part of emotion recognition，firstly，processed the static facial expression by the method of characteristic blocks，then the method 2DPCA was used to extract characteristics，finally applicated the multi-level quantum neural network classifiers in achieving seven-class classification of expression． In the part of affective computing，built a hid- den Markov model，and estimated the model parameters with improved genetic algorithm． In the part of emotion synthesis and output，establish a three-dimensional mesh face，and then used key frame techniques to achieve a continuous pattern of behav- ior consistent with human facial animation． Key words: virtual emotional human; two dimension principal component analysis ( 2DPCA) ; multi-layer quantum neural network; hidden Markov model ( HMM) 括乐观向上的，也包括悲观失落的，甚至精神不正常的［4］。这 不仅为研究个体机器人性格和情感提供平台，也将为研究机器 人群打下基础。 本文在深入研究前人方法的基础上，结合前人研究的各种 分立理论，经过改进后设计了一套交互平台进行情感交互实 验，有助于将具有某种性格的情感虚拟人系统嵌入到自主移动 机器人中，这使机器智能更加全面，具有深远的科学意义和广 泛的应用价值。 0 引言 情感处理系统在人机交互、电子教育、远程医疗、娱乐、行 为科学测量以及智能体等方面都具有广泛的应