VR环境中面向裸手交互的虚拟手指向优化研究.pdfVIP

摘要

随着虚拟现实（VirtualReality,VR）技术发展，人们可以通过手柄、语音、裸手、

眼控等多种模态的交互手段在VR中与物体进行交互。其中裸手交互兼具静默、便捷和

自发的优点，已成为VR中主流的交互方式。裸手交互具有丰富的编码空间，其关节位

置和姿态，以及手和操作者头和眼睛之间的位置关系都可以作为交互编码的要素。然而，

裸手操作的精确性、自然性与操控性之间的平衡仍是VR人机交互中的难题。

本课题以裸手交互的基础任务——在可达域之外的远距离指向任务为研究对象，通

过理论分析和实验研究来探索目标在虚拟空间所处的位置与裸手指向动作的手的位姿

的关系，探索提升指向交互自然性与操控性的优化指向方法。本研究的主要研究内容和

创新点如下：

(1)通过理论分析获取了裸手空间指向任务中的影响因素。通过对VR环境中指向

任务的人机交互流程的研究，分析了交互过程中硬件层、交互层、用户层上的影响因素，

并讨论了开环指向时的影响因素构成。

(2)通过多个实验定量研究了目标空间的深度、方位角和视场角对于裸手位姿的影

响。通过VR环境中的三维虚拟手指向实验，表明目标距离与目标所在的方位角对虚拟

手位置和姿态具有影响，指向目标时的头朝向与视线方向的夹角变化会影响手的位姿关

系。

(3)通过数据拟合得到空间目标分布中不同影响因素条件下手的位姿关系的多重线

性方程，并基于此提出一种优化虚拟手姿态的指向优化方法。该方法基于位姿关系方程

实现，以同步变化虚拟手化身的姿态的形式达到与人的自然指向更接近的虚拟手可视化

效果。

本文提出的优化方法以精确性、自然性与操控性之间的平衡为导向，可直接应用于

VR裸手指向任务中。本文的实验结果可为进一步研究裸手交互提供依据。

关键词：虚拟手交互，VR，自然指向任务，交互优化

Keywords:virtualhandinteraction,VR,naturalpointingtask,interactionoptimization

目录

摘要I

AbstractIII

目录V

第一章绪论1

1.1研究背景与意义1

1.1.1研究背景1

1.1.2研究意义3

1.2国内外研究现状4

1.2.1手部追踪技术4

1.2.2基于裸手的交互4

1.2.3虚拟替身的感觉官能5

1.2.4虚拟手远距离指向6

1.3研究内容7

1.4论文结构8

第二章VR中手部指向交互影响因素分析11

2.1VR手部指向人机交互系统概述11

2.1.1VR的人机交互系统11

2.1.2手部指向的人机交互系统12

2.2硬件层的影响因素13

2.3交互层的影响因素14

2.3.1输入空间14

2.3.2输出空间15

2.4用户层的影响因素16

2.4.1视觉感知机制16

2.4.2手臂运动机制17

2.5本章小结18

第三章VR中自然指向的偏差实验研究19

3.1研究目的19

3.2实验环境要求19

3.2.1实验软硬件环境19

3.2.2实验校准条件21

3.3实验设计22

3.3.1变量设计23

3.3.2任务设计25

实验内容26