系统学课件-人机交互技术.pptVIP

虚拟现实的概念模型 介入者 感知系统 反应系统 虚拟世界（环境） 感官刺激信号 反应动作 图4-11 虚拟现实的概念模型 * 虚拟现实的概念模型 理解虚拟现实的概念模型 从虚拟环境对人的作用来看，虚拟现实的概念模型可以看作为“显示/检测”模型。 从人对虚拟环境的作用来看，也就是从用户的角度看，上述概念模型可以看作“输入/输出”模型。 输入是指用户感知系统接受虚拟环境提供的各种感官刺激信号。 输出是指用户对虚拟环境系统做出的反映动作。 * 虚拟现实与多媒体及多通道 虚拟现实技术正是一种以集成为主的技术，其人机界面可以分解为多媒体、多通道界面。 从本质上说，多媒体用户界面技术侧重解决计算机信息表现及输出的自然性和多样性问题，而多通道技术侧重解决计算机信息输入及理解的自然性和多样性问题。 * 虚拟现实造型语言VRML VRML 是一种描述交互式三维世界和对象的文件格式。VRML允许描述对象并把对象组合到虚拟场景中，可以实现仿真系统，可模拟动画、具有动力学特性的物体。 VRML能构造一个交互的虚拟世界，其中的对象能对外部事件做出响应，并可在其中任意穿行。 可以支持虚拟场景的网上发布，并可实现多用户的实时参与。 VRML比高级语言容易掌握，并且无须再去了解OpenGL3D或者 Directx3D之类的三维图形开发库。 VRML文件的解释、执行和显示一般由浏览器来完成。 * VRML浏览器的概念模型 VRML浏览器概念模型的组成 解释器 读取VRML文件并产生场景图。 场景图 场景图包括节点的变换层次和路径图及执行引擎。 执行引擎处理事件、读取和编辑路径图、改变节点的变换层次。 听／视觉展示 浏览器的听／视觉展示部分完成变换层次的图形和声音的产生，给用户以反馈。 * 用户 执行引擎 路径图 *插值器 *感知器 *脚本 变换层次 音频／视频展示 解释器 原型 内建节点 VRML文件 用户输入 VRML浏览器 场景图 图4-12 一种 VRML浏览器的概念模型 * 4.4.4眼动跟踪（Eye-Gaze Tracking） 与视觉有关的人机交互自始至终都离不开视线的控制。 如果能通过视线的用户盯着感兴趣的目标，计算机便“自动”将光标置于其上，人机交互将更为直接，也省去了上述交互过程中的大部分步骤。 * 4.4.4眼动跟踪 早期的视线跟踪技术首先应用于心理学研究、助残等领域，后来被应用于图像压缩及人机交互技术。 视线跟踪技术有强迫式与非强迫式、穿戴式与非穿戴式、接触式与非接触式之分。 视线追踪主要用于军事领域（如飞行员观察记录），阅读及帮助残疾人通信等。 * 1.眼动的主要形式 眼动有三种主要形式(在人机交互中，眼动跟踪主要利用跳动和注视: 跳动（Saccades） 在正常的视觉观察过程中，眼动表现为在一系列被观察目标上的停留及在这些停留点之间的飞速跳跃。 在注视点之间的飞速跳跃称为眼跳动。 注视（Fixations） 停留时间至少持续100ms以上的称为注视。在注视中，眼也不是绝对静止不动，会有微小运动，但大小一般不会超过1°视角。 绝大多数信息只有在注视时才能获得并进行加工。 平滑尾随跟踪（Smooth Pursuit） 缓慢、联合追踪的眼动通常称为平滑尾随跟踪。 * 2.眼动跟踪的基本要求 在人机交互中眼动跟踪技术必须满足以下几点要求，才能满足实际需求： 不能妨碍视野。 不要与用户接触，对用户基本无干扰。 精度要高。 动态范围要从1弧分（六十分之一弧度）到45o。 反映速度要快，实时响应。 能与获取的身体和头部运动相配合。 定位校正简单。 可作为计算机的标准外设。 * 3.眼动跟踪的基本原理 利用红外发光二极管发出红外线，采用图像处理技术和能锁定眼睛的特殊摄像机，通过分析人眼虹膜和瞳孔中红外线图象点的连续变化情况，得到视线变化的数据，从而达到视线追踪的目的。 从视线跟踪装置得到的原始数据需要经过进一步的处理才能用于人机交互。 数据处理的目的是滤除噪声、识别定位及局部校准与补偿等，最重要的是提取出用于人机交互所必需的眼睛定位坐标。 但是由于眼动存在固有的抖动，以及眼睛眨动、头部剧烈的移动所造成的数据中断，存在许多干扰信号，提取有意眼动数据非常困难。解决此问题的办法之一是利用眼动的某种先验模型加以弥补。 * 4.米达斯接触问题与解决方法 “米达斯接触（Midas Touch）”问题 如果鼠标器光标总是随着用户的视线移动，可能会引起用户的厌烦，因为用户可能希望能随便看着什么而不必非“意味着”什么，更不希望每次转移视线都可能启动一条计算机命令。 避免“米达斯接触”问题的方法：在理想情况下，应当在用户希望发出控制时，界面及时地处理其视输入，而在相反的情况下则忽略其