基于变焦渲染与面部微表情驱动的高保真数字人实时交互系统设计.docxVIP

PAGE2

基于变焦渲染与面部微表情驱动的高保真数字人实时交互系统设计

摘要

随着元宇宙、远程协作与虚拟社交的快速发展，对数字人交互的逼真度与实时性提出了前所未有的高要求。现有数字人系统在视线匹配、表情细腻度和渲染延迟等方面存在明显短板，难以塑造自然沉浸的面对面交流体验。本课题聚焦虚拟现实领域，设计并实现一套基于眼动变焦渲染与面部微表情驱动的高保真数字人实时交互系统。系统以“所见即所感”为目标，创新性地引入注视点变焦渲染流水线，利用眼动追踪数据动态分配算力，在保证中心视野高精度的同时大幅降低外围渲染负载；并构建基于轻量级时序卷积与注意力机制的面部微表情驱动网络，实现从视频帧到三维角色表情