基于视觉的虚拟人情感交互方法研究-计算机应用技术专业论文.docxVIP

优秀毕业论文 精品参考文献资料 ㈣川删删㈣f|If ㈣川删删㈣f|If『删㈣ Y2048779 浙江大学硕士学位论文 摘要 摘要 虚拟人的情感交互是近年来计算机动画、计算机视觉、人机交互以及模式识 别等领域的研究热点。按照情感的复杂程度划分，用户的情感状态可分为单一情 感状态和混合情感状态，如何让虚拟人准确地理解用户的情感并与用户进行丰富 的互动是一项具有挑战性的工作。针对单一情感，本文设计并实现了基于视觉的 虚拟人情感交互系统；针对混合情感，本文设计并实现了面向混合情感的虚拟人 运动序列生成器。 单一情感是指只能为六种标准情感状态——恐惧、惊讶、厌恶、愤怒、高兴 和悲伤中的一种的情感。基于视觉的虚拟人情感交互系统首先利用真实感人脸建 模技术，通过用户输入一张正面人脸图片，自动地为用户生成一个真实感的虚拟 人脸。然后利用嵌入式隐马可夫模型提取真人视频序列中的人脸表情，驱动虚拟 人脸实时地做出相应的表情，丰富了虚拟人的情感。最后，我们设计了一个人头 跟踪算法，实时地估计出真人视频中的人头姿势，驱动虚拟人脸在三维空间中做 出相同的姿势，使虚拟人更加生动活泼。实验表明基于视觉的虚拟人情感交互系 统使用户无需机械地操作计算机外设，只要在摄像头前做出各种面部表情以及头 部姿势就能够向虚拟人传达情感，并得到虚拟人相应的反馈。 混合情感是指由上述六种标准情感状态按照一定的比例组合而成的一种混 合的情感状态。面向混合情感的虚拟人运动序列生成器首先为六种标准情感分别 构建了一个与之对应的身体运动片段数据库。每一个身体运动片段都记录了其所 属的情感状态、情感强度、身体各关节的运动轨迹、持续时间和用户使用频率。 对于一种特定的混合情感，运动序列生成器在对应的数据库中搜索出若干条能够 表达当前情感状态的身体运动片段，并将他们组合成一条多模的情感表达序列， 最后驱动虚拟人做出一段符合当前情感状态的运动。实验表明多模的序列表达能 够更加真实地表达用户的混合情感。 关键词： 人机交互，情感计算，表情识别，头部姿势检测，虚拟人运动序列 浙江大学硕士学位论文 浙江大学硕士学位论文 Abstract Abstract The emotional interaction between virtual human and live people has been received a great interest in computer animation，computer vision，human machine interaction and pattern recognition in recent years．Based on the complexity of emotion state，user。s emotion state could be classified into two types：atomic emotion state and synthetic emotion state．How to make the virtual human understand the user’S emotions accurately and interact、^，itll the users lively is a great challenge．Aim to atomic emotion state，we developed a vision-based system for virtual human’S emotional interaction．Aim to synthetic emotion state，we developed expression sequences for synthetic emotion． Atomic emotion state is the emotion only could be one of the six standard emotion stateS__joy,sadness,fear,angry,disgust and surprise．In the vision-based system for virtual human’S emotional interaction，we firstly use the technology of realistic 3D face modeling to generate a realistic