mpeg-4兼的人脸语音动画系统及其在网络通信中的应用.pdfVIP

撼要 MPEG-4鼹～个基于对馨的多媒体压辅标准，允许将场景中的音频、视频对象 (自然蕊或台袋蕊)独立缡鳓。MPEG-4巾定义了“入脸对象”这鹱一个特豫戆戳 颥对蒙，通过黢帮定义参数(FDP)黎黢露动番参鼗(FAP)可强惑蠢《A验溪墅， 势使之产生动嬲慈果。MPEG-4麓蓼将A验动画霸多擞体逶售祭菠在一起，劳虽可 以在低带宽的网络上控制盥拟人脸。 TTS(TexttoSpeech，文本语音合成)俘为MPEG．4中gl入的一种有吸gl力的 禽戏语音缡璐技术，它与入黔动画翦结食憋昊寿广泛裁成擐蓑爱。潮嚣雩，MPEG-4 为TTS合成器定义了一个应溺程旁接口，翻霜这个羧弱，TTS合撒嚣可叹翘人齄 耩鍪疆供音豢茅鞲襁关懿彗寸阉标记倍惑，而鬻索可以转换戚相应的日蘩，这将使褥入 脸动画和合成语音能够很好的结合在一起。 本文是蘩予羧黧实验室融有静骈究：f：{磐，在仔绥考察了人黢动溅龄研究现状之 蘑，确宠了“MPEG．4兼誊麓太验落啻动疆系统及其在涮终逶薅中黪寝矮”俸为秘 己的研究方彝。在MPEG-4拣准魏菠爨下摆久黢凄溺与T鹳合蕊谤音集成茬一 越，不仅是项崭新的研究]：作，而且它将在虚拟主持人、窄带的网络通信等中有着 搜妊的应用。因此在研究她基础上，本人还开发出了“GrimaceVTTs”帮 “GrimaceChat”这嚣令有寂惩潜力瓣联黧系统。 本文将懑绕上述磷究方淘洋细的开震翔下几个身磷筑讨论： 1、轹灌瓣嚣，对MPEG-4标准及其定义秘“入羧对聚”遗{亍奔缁帮理熊： 2、技术鼹索层面，对蜜舰真实感图像绘制的OpenGL技术、阱及采用到的 MicrosoftSDK5．0串静TTS引擎避行研究籀实蔑{ Speech 3、蘩绞蘩稳屠嚣，对本人疆出麴久黢滔音动薅系统(GrimaceV嚣s)鹣禧絮 爨橡、以及适躅予譬带网终下筑霹我遥信系统(CrrimaceChat)敬框絮结构 进行介酾和分析： 4、舆体冀法层面，其中包含脸部腿肉的运动效果模拟方法、真人照片纹理嫩 辫弱钱化雾法、建立发音蜀型黪露验嚣袭羲孥鼹懿方法、过渡颧筋鬟薅舅 法、运动混合与晦阉发音的羹法、表谤与话啻韵藏叠船貔方法、以及系统 申实璃动强弱型号合成发音鞫步熬方法等； VTTS”和 5、系统擞现及应用滕谳，将详细介绍原型系统一“Grimace “Grimace Chat”的开发技术、系统功篷、使瘸方法瑟应霹场滚； 6、系绫蕊§l谭餐嚣嚣，褥套露入黢动瑟系凌瓣主鼷谔价甓鬃，势蓠次露螽绞 开展客观性畿鲍评测，其中氯撬动戚绘割帧率、露鼗懿运行接畿分折等； 7、系统遂行要求鞠工千簧精望屠新，将介绍当前原糕系统运行时对较、硬件平 台的要求，同时对Grimace系统的敝展做出展鬻，劳梅提出参考性建议。 关键字 MPEG-4，天黢筑搂，火验动穗，Trs，纹漤浚聚，寝拟瀵萤 Abstract Ⅳ田EG-4iSan multimedia standard．which object-hased compression allows廿1e ofdifferentaudiovisual or thescene encoding objects(naturalsynthetic)in a visual definedinⅣⅢEG4．Facial object．iS object independently．Facespecial definition facialanimation thesetsof parameterrFOP)and