第6章 多媒体系统的人机交互.ppt

传统的信息处理环境一直是“人适应计算机”，而当今的目标或理念是要逐步使“计算机适应人”，人们要求通过视觉、听觉、触觉、嗅觉，以及形体、手势或口令，参与到信息处理的环境中去，从而取得身临其境的体验。这种信息处理系统已不再是建立在单维的数字化空间上，而是建立在一个多维的信息空间中。计算机包括3个主要部分：人机信息交互、信息处理和存储以及信息显示，其中，“信息处理和存储”和“信息显示”技术更新和发展的速度相当快。 第6章 多媒体系统的人机交互技术 多媒体系统的人机交互技术 人机界面概述 人机界面的发展历史人机界面是计算机与人（使用者）之间通信和对话的接口，是计算机系统的重要组成部分。计算机的发展，推动着人机接口技术和人机界面的发展。人机界面指人类用户与计算机系统之间的通信媒体或手段，它是人机双向信息交换的支持软件和硬件。 人机界面的发展历史 人机界面设计技术 用户界面的设计目的以及设计原则 （1）以用户的行为为基本出发点。 （2）考虑用户操作时间长短。 （3）以用户操作中的出错率为依据，改进界面设计。 （4）分析用户在操作中需要记忆的东西，减少用户短期记忆、长期记忆和学习负担。 （5）采用日常生活的常识和比喻，较少计算机逻辑思维和专业术语。 （6）从用户的思维和感知能力出发，减少各种脑力负担，包括视觉寻找、区别、识别负担、解决问题负担和决策难度。这些都可以表示为“减少注意”。 （7）注重用户的个人特性和区别，例如老年人、残疾人的需要。 （8）为提高通用性，用户界面最好采用一致性原则，用户希望工具顺手简单。 软件界面的设计的特殊性 多媒体界面设计的艺术原则 对比原则 协调原则 平衡原则 界面是否平衡是非常重要的 趣味原则 多通道用户界面多通道人机界面技术基于视线跟踪、语音识别、手势输入、感觉反馈等新的交互技术，允许用户利用自身的内在感觉和认知技能，使用多个交互通道，以并行、非精确方式与计算机系统进行交互，旨在提高人机交互的自然性和高效性。 多通道概念 多通道用户界面的特点 多通道用户界面的主要研究内容 多通道用户界面评价 多通道用户界面的应用 三维人机交互技术三维人机交互技术与传统的WIMP（Window，Icon，Menu，Pointer，窗口、图标、菜单和指点装置）图形交互技术不同。它采用六自由度输入设备。所谓六自由度，指X、Y、Z轴平移和绕X、Y、Z轴旋转，而现在流行的用于桌面的交互设备，如鼠标、轨迹球、触摸屏等只有两个自由度（沿平面X、Y轴平移）。由于自由度的增加，使三维交互的复杂性大大提高。另外，窗口、菜单、图标和传统的二维光标在三维交互环境中会破坏空间感，同时也使得交互过程非常不自然。 三维交互设备 三维交互方式 人机交互中的视线跟踪技术 视线运动的特点视线（Visual Line）反映人的注意方向，这是将其用作计算机输入的前提。视线运动通常表现为点到点的跳跃式扫描（saccade），而并非平滑移动（这只在追踪运动物体时才会发生）。例如，阅读是人眼在一行中通常包含4～7个跳跃—定位的动作，注视一般持续200～600ms，只是我们通常并未在意。但是我们的眼球为看清物体总是需要不停的眼动而不是突然的扫视。因此，利用视线进行书写和画图这样精细的动作是不可行的，换言之，我们不能利用眼动产生的轨迹。另一类眼动如眼球颤（Nystagmus）、会聚（Convergence）和扭转（Torsionalrotation）对人机对话也没有显著意义。 视线跟踪技术 视线跟踪技术及装置有强迫（Intrusiveness）与非强迫（Nonintrusiveness）、穿戴与非穿戴式、接触与非接触（Remote）之分。 视线跟踪技术的应用 实现跟踪技术早期主要应用于心理学研究（如阅读研究）、助残等领域，后来被应用于图像压缩及人机交换技术。从理论上说，由于几乎所有的人机交互形式都离不开视觉介入，因此，当用户凝视其感兴趣的目标时，如果系统能“自动”将光标置于其上或触发必要的动作，则比利用鼠标器等间接指点设备甚至触屏这样的直接指点设备更为直接。2008年北京残奥会期间就展示了大量的这种产品。 另一方面，将视线应用于人机交互的基本出发点是希望将它作为一种“更为直接”的直接指点设备，以及代替或部分代替鼠标器（目前的主流交互设备）的功能。但这必须克服所谓的“米达斯接触”（Midas Touch）问题。 多通道用户界面中的视线跟踪技术在多通道用户界面研究中，将视线输入作为一个辅助通道加以利用，可充分发挥视觉与语言的互补作用。研究者认为，视线跟踪技术固有的不精确性与视线的随意性使其不宜作为精确输入，而作为附加约束信息则有重要价值。多通道用户界面可以将视线输入作为一种自然的、辅助的交互通道加以利用，从视线