人机交互系统的设计准备.ppt

第三讲

人机交互系统的设计准备虚拟环境是一个封闭的回路系统，虚拟环境生成系统将生成的用以仿真现实环境的图象、音响(和语音)、压力等等通过人机接口系统作用到用户的感官，并实时通过传感器测试与跟踪用户的行为与反应，以便实时调整生成的序列，用户则通过交互方式可以实际感知和响应虚拟环境。虚拟环境人机接口系统中传感器的作用是将得到的用户数据实时地反馈到虚拟环境系统中，而虚拟环境则可以根据这些数据来计算和生成新的视景、音响和作用力，以使生成的系统更加逼真，更加符合自然规律，并将新的结果再作用到用户作为新的激励。为了设计一个友好和实用的虚拟环境系统，有必要对虚拟环境系统的构成，特别是人机交互系统的构成，以及其中主要部件和模块的情况和设计准则有一个概括的了解。关于友好和实用虚拟环境的解释，本领域的开创人IvanSutherland最初的想法是利用计算机系统构造一个用户看起来是“景物真实、动作真实、声音真实、感觉真实”的世界。当时强调的是视觉感知和视觉作用，主要想法是通过显示设备(头盔式显示器HMD)来解决问题。从虚拟环境技术的应用中不难发现，在虚拟环境的实现中实际要解决的问题远比仅仅开发一个显示设备要复杂得多，因为它需要考虑虚拟环境系统的所有主动和被动的部分，包括视觉、听觉、触觉、嗅觉以及回路中人的运动和对环境的反应。由此，我们可以看出这样的系统绝不只是一个简单的显示系统，至少还必须考虑音响系统、力觉作用系统、人类感知的心理学和生理学因素、传感器技术、实时图象生成及系统集成。虚拟环境的基本设计准则设计一个应用虚拟环境系统，应该确定的设计准则和策略：所设计的系统应该是开放的虚拟环境系统是一个集成系统，是一个尚不成熟的技术学科。为了使所设计的系统能够方便地在绝大多数硬件平台上运行，能够吸收任何新的软件系统和硬件设备成为自己的组成部分，能够方便地在网络环境上运行，必须遵循开放性设计的原则。所设计的系统应该是面向对象的和可重用的虚拟环境系统中的软件子系统和传感设备种类繁多，而且新的设备不断出现，新的应用要求也不断出现，因此必须采用面向对象技术，将功能块和功能设备全部利用面向对象技术进行描述和管理。所设计的系统应该是服从标准化原则必须认真了解每个分支领域在接口和算法方面的标准化现状，严格服从已有的标准化方案，对正在制定中的标准化方案也要充分注意。所选择的部件或子系统应该是有生命力在灵境的商品化领域，特别是虚拟环境中的传感设备和应用软件方面，绝大多数的公司都是只有几十个人甚至几个人，因而如何判断他们的生命力是一个很困难的问题。用户的安全和健康放在第一位与其他的计算机应用系统不同，虚拟环境系统使用生成的视景和音响，使用力学装置产生虚拟环境，由于我们对生成的环境、对人的健康到底会有什么样的影响和副作用尚不十分清楚，所以在设计和引入某些设备时一定要首先考虑可靠性，要仔细计算或调查对于用户可能带来的任何影响。虚拟环境系统分类根据应用的要求，虚拟环境系统可以设计成非配带型或配带型：非配带型有时也称为桌上型，其视景是通过计算机的屏幕，或电视屏幕，或投影屏幕，或室内的实际景物加上部分计算机生成的环境来提示给用户的；音响是通过安放在桌上的或室内的音响系统提供的。汽车模拟器、飞机模拟器、电子会议等都属于非配带型。非配带型的优点是用户比较自由，不需要戴头盔和耳机，不需要戴数据手套，不需要戴跟踪器，可以同时允许多个用户加人系统，对用户数的限制铰小。但非配带型系统不容易解决双目视觉竞争问题。不容易构造用户沉浸于其中的环境。非配带型系统中比较重要的功能块包括计算机系统、显示系统、摄象机的光学跟踪系统、音响系统、甚至网络系统。配带型用封闭的视景和音响系统将用户的视听觉与外界隔离，使用户完全置于计算机生成的环境之中。计算机通过用户戴的数据手套和跟踪器可以测试出用户的运动和姿态，并将测得的数据反馈到生成的视景中，产生人在其中的效果。配带型系统中比较重要的功能块包括计算机系统、头盔式显示器、图象生成器、数据手套、音响系统和力学传感器系统等等。虚拟环境中人机接口系统的构成在理想的情况下，虚拟环境系统应当是多传感器构成的人机交互方便的综合集成系统，该系统所产生的图象的分辨率应该足够高，图象要十分丰富和自然(主要指图象的色彩和运动图象的连续及实时显示)，系统集成不会产生延迟，色彩和立体感要足够好，音响的立体声效果要好，语音合成要足够逼真，力感要足够细微，用户使用该系统不会轻易感觉疲劳，系统中的传感器系统应具有多个自由度，延迟时间要足够短。一个理想的虚拟环境系统的人机交互系统应该包括右图所示的内容：虚拟环境生成器立体声音响合成语音合成图形图象生成语音识别头眼