面向虚拟场景交互任务的分阶段视线预测方法.pdfVIP

第37卷第2期计算机辅助设计与图形学学报Vol.37No.2

2025年2月JournalofComputer-AidedDesignComputerGraphicsFeb.2025

面向虚拟场景交互任务的分阶段视线预测方法

1)1)1,2)*

李国安,刘俊辰,汪淼

1)(北京航空航天大学计算机学院北京100191)

2)(中关村实验室北京100190)

(miaow@buaa.edu.cn)

摘要:视线预测方法是指通过用户的各类信息预测用户当前注视方向的一种算法模型,现有的在虚拟场景中进行

视线预测的方法通常使用泛化的模型,在各类具体交互任务上仍有较大的提升空间.所提方法的交互任务设置为在

虚拟场景中走动寻找—接近—触碰物体,首先构建了该任务场景的第1个数据集,包含21名用户在3个交互场景下

各进行5次交互任务过程中记录的注视点、物体、头盔和手柄4类参数序列和录制视频;进一步将用户完成交互任

务的过程分为3个阶段,即寻找目标物体—锁定目标物体—接近目标物体;然后逐阶段进行相关性分析,选择与视

线相关度最高的参数集输入网络进行训练.所提方法在自行构建的数据集上进行验证,与当前主流算法的3.31°的预

测误差相比,所提方法达到了2.60°的预测误差,预测误差减小21.45%,提升了该任务场景下的预测精度.

关键词:虚拟现实;视线预测;深度学习;人机交互

中图法分类号:TP391.4DOI:10.3724/SP.J.1089.2023-00333

StagedGazePredictioninVirtualSceneInteractionTasks

LiGuoan1),LiuJunchen1),andWangMiao1,2)*

1)(SchoolofComputerScience,BeihangUniversity,Beijing100191)

2)(ZhongguancunLaboratory,Beijing100190)

Abstract:Gazepredictionmethodreferstoanalgorithmmodelthatpredictstheuser’scurrentgazedirection

throughvarioustypesofuserinformation.However,currentmethodsforpredictinggazeinvirtualscenestypi-

callyrelyongeneralizedmodelsandstillhaveconsiderableroomforimprovementinspecificinteractivetasks.

Thispaperfocusesonimprovinggazepredictionfortheinteractivetaskflowoffinding-lockingonto-approaching

targetobjectsinvirtualscenes.Wefirstconstructthefirstdatasetf