基于表情活动单元人脸模型自动适配.pdfVIP

第20卷 第2期 南 京 邮 电 学 院 学 报 (自 然 科 学 版) Journal0f№ ingUniversity0f‰ andTeleeanmaumcations(NaturalScience) ．20 No2 2000年 6月 J岫 ．2000 文章编号：1000-1972(2000)02-00~q)5 基于表情活动单元的人脸模型 自动适配 一 c。f 藿惟晓，，童黄 ，余／余兆兆明明-7=7尹，箩／乒 摘 要：基于表情活动单元的人脸模型自动适配是极低码率可视电话模型基编码所必需的。本文提出 的算法使用变彤模板估计眼睛和嘴巴的特征，利舟这些特征用C．a~de模型升人脸进行适配。本算 法时人脍模型的全局适配没有旋转限制，而且表情活动单元的初值决定于模仿适配。算法在视频 序列Aldyo和g-issXm~ea(CAF，10}Iz)上实验，证明了其正确性和有效性。 关键词：图像墒码；表情活动单元；人脸模型：模型基编码；语义基墒码 帽触删 自迢 1 弓I 言 参数不能被适配决定。 本文提 出眼腈和嘴 巴用表情活动单元对 Can． dide模型进行适配。眼睛和嘴巴的特征包括嘴唇的 极低码率可视 电话视频序列 的模型基编码 中， 厚度、眼腈和嘴巴的角点、眼睑和嘴唇张开的高度， 物体基分析．台成编码 (OBAsc)是基于活动三维(3． 这些参数用变形模板最先估计。接着，对Candide模 D)物体源模型，由网眼三角形组成的。为了得到比 型分三步适配：(1)全局适配，在 3D空间中确定人 OBAsC中更精确的人脸的模仿，知识基分析．台成编 脸模型的位置并定其比例；(2)局部适配，对人脸模 码(KBASC)中使用了预先确定的人脸模型。其中的 型的眼角位置和嘴唇厚度适配；(3)模仿适配，对眼 人脸模型仅仅用眼睛和嘴巴的中点来适配。人脸模 睑、嘴唇张开的高度 以及嘴角位置用表情活动单元 型跟踪依靠全局头部运动补偿和脸部模型帧 问更 适配，并且决定表情活动单元的初值。提出的算法 新。这样，编码效率高，并且允许利用人脸位置的已 对人脸模型的全局适配没有旋转限制，并且依靠模 知知识主观调整比特分配。但人脸模仿(脸部表情) 仿适配决定表情活动单元的初值。实验结果表明了 知识象睁开服腈或张开嘴巴仍然没有被利用。这个 本算法的正确性和有效性。 知识被应用在语义基编码 中。其中，人脸模仿在发 送端估计，在接收端实现脸部动画。为了进一步提 高编码效率，可进行模仿编码。模仿可用肌 肉参数 2 眼睛和嘴巴的特征估计 或表情活动单元描述。 在已有的人脸模型适配算法中，一种对人脸模 在通用人脸模型的模仿适配之前，场景中的脸 型手工适配 ，或依靠眼睛和嘴巴的中点以及眼睛 部特征必须 自动估计，其中包括下颚、眼睛、眉毛、嘴 和嘴巴的角点适配 。，通过最速下降法和特征值分 巴和鼻子