一种无标记点人脸表情捕捉与重现算法-电子学报.PDF

第９期 电　　子　　学　　报 Ｖｏｌ．４４　Ｎｏ．９ ２０１６年９月 ＡＣＴＡＥＬＥＣＴＲＯＮＩＣＡＳＩＮＩＣＡ Ｓｅｐ．　２０１６ 一种无标记点人脸表情捕捉与重现算法 １，２ １ 吴晓军 ，鞠光亮 （１．哈尔滨工业大学深圳研究生院，广东深圳５１８０５５； ２．深圳先进运动控制技术与现代自动化装备重点实验室，广东深圳５１８０５５） 　　摘　要：　提出了一种无标记点的人脸表情捕捉方法．首先根据ＡＳＭ（ＡｃｔｉｖｅＳｈａｐｅＭｏｄｅｌ）人脸特征点生成了覆 盖人脸８５％面部特征的人脸均匀网格模型；其次，基于此人脸模型提出了一种表情捕捉方法，使用光流跟踪特征点的 位移变化并辅以粒子滤波稳定其跟踪结果，以特征点的位移变化驱动网格整体变化，作为网格跟踪的初始值，使用网 格的形变算法作为网格的驱动方式．最后，以捕捉到的表情变化数据驱动不同的人脸模型，根据模型的维数不同使用 不同的驱动方法来实现表情动画重现，实验结果表明，提出的算法能很好地捕捉人脸表情，将捕捉到的表情映射到二 维卡通人脸和三维虚拟人脸模型都能取得较好的动画效果． 关键词：　无标记点跟踪；人脸表情捕捉；表情动画重现 中图分类号：　ＴＰ３９１　　　文献标识码：　Ａ　　　文章编号：　０３７２２１１２（２０１６）０９２１４１０７ 电子学报ＵＲＬ：ｈｔｔｐ：／／ｗｗｗ．ｅｊｏｕｒｎａｌ．ｏｒｇ．ｃｎ　 ＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．０３７２２１１２．２０１６．０９．０１８ ＡＭａｒｋｅｒｌｅｓｓＦａｃｉａｌＥｘｐｒｅｓｓｉｏｎＣａｐｔｕｒｅａｎｄＲｅｐｒｏｄｕｃｅＡｌｇｏｒｉｔｈｍ １，２ １ ＷＵＸｉａｏｊｕｎ ，ＪＵＧｕａｎｇｌｉａｎｇ （１．ＳｈｅｎｚｈｅｎＧｒａｄｕａｔｅＳｃｈｏｏｌ，ＨａｒｂｉｎＩｎｓｔｉｔｕｔｅｏｆＴｅｃｈｎｏｌｏｇｙ，Ｓｈｅｎｚｈｅｎ，Ｇｕａｎｇｄｏｎｇ５１８０５５，Ｃｈｉｎａ； ２．ＳｈｅｎｚｈｅｎＫｅｙＬａｂｏｒａｔｏｒｙｆｏｒＡｄｖａｎｃｅｄＭｏｔｉｏｎＣｏｎｔｒｏｌａｎｄＭｏｄｅｒｎＡｕｔｏｍａｔｉｏｎＥｑｕｉｐｍｅｎｔ，Ｓｈｅｎｚｈｅｎ，Ｇｕａｎｇｄｏｎｇ５１８０５５，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ：　Ｔｈｉｓｐａｐｅｒｐｒｅｓｅｎｔｓａｍａｒｋｅｒｌｅｓｓｆａｃｉａｌｅｘｐｒｅｓｓｉｏｎｃａｐｔｕｒｅａｎｄｒｅｐｒｏｄｕｃｅａｌｇｏｒｉｔｈｍ．Ｆｉｒｓｔｌｙ，ａｎｕｎｉｆｏｒｍ ｍｅｓｈｍｏｄｅｌｉｓｂｕｉｌｔｂａｓｅｄｏｎｔｈｅｆｅａｔｕｒｅｐｏｉｎｔｓｆｒｏｍＡＳＭ（ＡｃｔｉｖｅＳｈａｐｅＭｏｄｅｌ）．Ｉｔｃａｎｃｏｖｅｒ８５ｐｅｒｃｅｎｔｏｆｔｈｅｆａｃｅ．Ｔｈｅｎ， ａｍｅｔｈｏｄｔｏｃａｐｔｕｒｅｆａｃｉａｌｅｘｐｒｅｓｓｉｏｎｂａｓｅｄｏｎｔｈｅｆａｃｅｍｏｄｅｌｉｓｐｒｏｐｏｓｅｄ．Ｔｈｅｏｐｔｉｃａｌｆｌｏｗｔｒａｃｋｉｎｇｉｓｕｓｅｄｔｏｔｒａｃｋｔｈｅｆｅａ ｔｕｒｅｐｏｉｎｔｓｗｉｔｈｐａｒｔｉｃｌｅｆｉｌｔｅｒｆｏｒｓｔａｂｌｉｚｉｎｇｔｈｅｒｅｓｕｌｔ．Ｔｈｅｆｅａｔｕｒｅｐｏｉｎｔｓ’ｄｉｓｐｌａｃｅｍｅｎｔｃａｎｄｒｉｖｅｔｈｅｏｖｅｒａｌｌｍｅｓｈｔｏｄｅｆｏｒｍ ａｓｔｈｅｉｎｉｔｉａｌｖａｌｕｅｏｆｔｈｅｍｅｓｈｔｒａｃｋｉｎｇ．Ｆｉｎａｌｌｙ，ｔｈｅｃａｐｔｕｒｅｄｅｘｐｒｅｓｓｉｏｎｄａｔａｉｓｕｓｅｄｔｏｄｒｉｖｅｆａｃｅｍｏｄｅｌｓｗｉｔｈｄｉｆｆｅｒｅｎｔ ｍｅｔｈｏｄｓｆｏｒｔｈｅｍｏｄｅｌｓｏｆｄｉｆｆｅｒｅｎｔｄｉｍｅｎｓｉｏｎｓ，ａｎｄｔｈｅｎｔｈｅｆａｃｉａｌａｎｉｍａｔｉｏｎｃａｎｂｅｒｅｃｏｎｓｔｒｕｃｔｅｄ．Ｅｘｐｅｒｉｍ