基于多通道交互技术自然交互界面.pdfVIP

PIP ：基于多通道交互技术的自然交互界面∗ 1,2 2 2 2 王亮 张博 张凤军 戴国忠 1 （中国科学技术大学计算机科学技术系 安徽 合肥 230027） 2 (中国科学院软件研究所人机交互技术与智能信息处理实验室 北京 100080) 摘 要 本文描述了一种新的虚拟现实交互范例，引入日常的纸笔操作到虚拟三维场景中，构建了一个 基于双手交互的个人交互面板 （Personal Interaction Panel ，PIP ）。在设计中，融合跟踪器的三维空间 信息输入、语音输入、笔画输入实现自然直接的多通道交互。以城市规划为应用背景，研究通用交互 技术来展现个人交互面板的在虚拟现实环境中的普遍适应性，包括使用跟踪器的导航漫游，基于语音、 笔手势命令的系统控制，采用光线投射、3D 器件的对象选择和操作等。 关键词 虚拟现实、多通道、双手交互、笔手势、光线投射、3D器件。 1. 引言 多通道交互是人们日常交流的一个主