特征点提取及图像变形在语音动画中的应用.pdfVIP

维普资讯 第31卷 第 9期 计 算 机 工 程 2005年 5月 May2005 VoL31 他 9 ComputerEngineering · 多媒体技术及应用 · 文章编号2005)090179--03 文献标识码：A 中图分类号：TP3914·3 特征点提取及图像变形在语音动画中的应用 牛晓松 ，王 淘 ，万寿红 (1中国科学技术大学计算机科学技术系，合肥 230027；2．微软一科大智能计算研究中心) 摘 要：使用改进的基于图像库方法HMM 方法进行人脸语音动画合成过程中，为r保证结果视频流的平滑真实， 相应 素的I到像帧之间进 行插值产生中间帧就成为语音动画中 卜分重要的部分。该文介绍 从相应语音的图像帧l}1提取特征区域进而对其中的特征点进行定位 ，从lf1j将 特征区域根据需要进行划分并在前后对应音素的图像帧中进行变形进而得到流畅 自然的语音动画效果的工作模块。 关健词：特征点提取；图像变形；语音动画 ApplicationofFeaturePointsExtractionandGraphicDeformation TechniquesinSpeechAnimation NIU Xiaosong ，WANGXun ，WANShouhong f1DepartmentofComputerSci． Tech UniversityofSci Tech ofChina．Hefei230027： 2Microsoft—USTC IntelligentComputingResearchCenter1 [AbstractlDuringusingtheimprovedmethodHMM ofb“asedonimage—warehouse”tosynthesizespeechanimation、inordertoguaranteethe frequencyofthefinalresult itmustinterpolatesomeframesbetweenframesofthetwocorrespondingphonemes．Thispaperintroducesthemethodol pickingup featurepointsfrom correlation framesofphonemes，dividing thefeatureareaswiththesepointsandinteprolatingsonleframesbetween existingframestogetafluentvideo—flow [KeywordslFeaturepointsextraction；Imagemoprhing；Speechanimation 当前的智能人机交互接 口技术主要涉及到语音、 像、 音、方言等因素造成的误差，增强系统的适用性。同时提取 人工智能、生物等诸多领域。而作为该技术的重要形式之一 ， 视频帧中人脸的特征点坐标，从其中提取对我们实验敏感的 虚拟人正成为该技术中的研究热点。所谓虚拟人，就是在计 特征参数矢量 。通过这些预处理，呵以使用已有的同步语音 算机终端提供一个和真实人脸非常相似的虚拟人脸，该虚拟 视频序列训练改进的HMM模型，得到包含了语音特征到视 人能够和人进行对话，或者根据输入合成带有真实表情的语 频特征的映射关系，这样就可以利用这个关系来合成新的语 音波形。研究者对于人脸合成技术有两种不同方式的分类： 音视频序列。利用这个模型，仅仅通过同一角色的语 信息 一 种是分成几何处理的方法和图像操作的方法；另一种是将 也能重建整个语音视频序列。从语音重建视频，减轻_』