数字人驱动面部捕捉标记点布置与重定向权重.docxVIP

数字人驱动面部捕捉标记点布置与重定向权重

摘要：高保真数字人驱动依赖于精准的面部捕捉标记点布置与鲁棒的重定向权重解算。本文提出了一套面向光学动捕系统的标记点优化布置方案与基于径向基函数（RBF）的重定向权重计算方法。在标记点布置方面，基于面部肌肉运动解剖学，在面部定义了47个关键标记点（包括眉毛6个、眼睛8个、鼻子4个、嘴巴12个、下颌6个、脸颊6个、额头5个），通过有限元仿真优化了标记点的空间分布，最小化了标记点间的运动耦合误差。在重定向权重方面，采用RBF插值将真实演员的标记点位移映射到数字人骨骼的blendshape权重上，通过引入局部支撑函数（WendlandC2）提高了映射的局部精度与泛化能力。在虚幻引擎5的数字人平台上进行了验证：标记点布置方案使面部重建误差从2.8mm降至1.2mm，重定向权重的时序抖动减少62%，数字人表情的自然度评分（10人盲评）从6.8/10提升至8.9/10。在实时驱动场景（60fps）中，重定向计算延迟为1.2ms，满足实时交互要求。本工作旨在为数字人驱动提供从硬件标记点布置到软件权重解算的完整技术方案。

关键词：数字人驱动；面部捕捉；标记点布置；重定向权重；径向基函数

第一章绪论

数字人——由计算机生成的、具有逼真外观与自然表情的虚拟角色——正在成为元宇宙、虚拟、影视制作与远程交互的核心载体。从MetaHuman到UnrealEn