第12章多媒体人机交互技术-主讲人：杨帆.pptVIP

主讲人：杨帆 第十二章 多媒体人机交互技术 本章导读 12.6.3 虚拟现实技术的特征 1）多感知性：除了一般计算机所具有的视觉感知外，还有听觉感知、力觉感知、触觉感知、运动感知、甚至包括味觉感知、嗅觉感知等。理想的虚拟现实就是应该具有人所具有的感知功能。 2）存在感：指用户感到作为主角存在于模拟环境中的真实程度。理想的模拟环境应该达到使用户难以分辨真假的程度。 3）交互性：指用户对模拟环境内物体的可操作程度和从环境得到反馈的自然程度（包括实时性）。 4）自主性：指虚拟环境中物体依据物理定律动作的程度。 12.6.4 虚拟现实的关键技术 就现有的虚拟现实系统而言，其关键技术可以包括以下几个方面： 1、动态环境建模技术 动态环境建模技术的目的是获取实际环境的三维数据，并根据应用的需要，利用获取的三维数据建立相应的虚拟环境模型。三维数据的获取可以采用CAD技术（有规则的环境），而更多的环境则需要采用非接触式的视觉建模技术，两者的有机结合可以有效地提高数据获取的效率。 2、实时三维图形生成技术 关键是“实时”生成。 3、立体显示和传感器技术 4、应用系统开发工具 5、系统集成技术 现有的虚拟现实外设还远远不能满足系统的需要，例如，数据手套（如下图所示）有延迟大、分辨率低、作用范围小、使用不便等缺点；有必要开发新的三维显示技术。 12.6.5 虚拟现实技术的应用领域 1、遥控机器人的遥现技术 2、各类仿真技术 1）飞行仿真系统 2）与虚拟生物对话 3）作战仿真系统 3、对象可视化技术 1）虚拟风洞 2）虚拟物理实验室 3）虚拟电力控制室 本章小结 本章主要介绍了人机交互的基本概念、现有的人机交互技术以及新型人机界面的主要特征等内容，较为全面地概括了多媒体计算机系统或多媒体终端（PDA、多媒体手机等）的人机交互形式和途径。 通过学习本章，应掌握人机交互的基本概念、人机交互的研究内容以及新型人机界面的主要特征等内容，并对目前的各种人机交互技术（触摸屏技术、OCR技术、手写识别技术、语音识别与合成技术、虚拟现实技术等）有所了解。主要包括以下内容： 1)人机交互技术是指通过计算机系统的输入/输出设备，以有效的方式实现人与计算机系统之间信息交流的技术。它包括机器通过输出设备给人提供大量有关信息和操作导向，人通过输入设备向计算机输入操作信息等。从第一台计算机诞生到现在，人与计算机之间的交互方式经历了手工操作、字符用户界面（命令语言）、可视化的图形用户界面（GUI）3个阶段，人们操作使用计算机的直观性有了明显的改善。 2)多模态（Multimodality）人机交互，就是基于智能接口技术，充分利用人的多种感知通道，以并行的、非精确的方式与计算机系统进行交互，旨在提高人机交互的自然性和高效性。 3)计算机系统中的可视化主要包括操作过程可视化、科学计算可视化和信息可视化3个方面。操作过程可视化是现代操作系统提供人机交互环境的基本要求，它通过GUI技术来实现；科学计算可视化是指运用计算机图形学和图像处理技术，将科学计算过程中的数据转换为图形或图像在屏幕上显示出来，进行交互处理的理论、方法和技术。 4)新型人机界面的主要特征是，人机交互更加人性化、自然化、智能化、高带宽，并且不受地点限制。 5)触摸屏是一种定位装置，安装在显示屏幕前面，其功能是报告手指（或物体）触摸到屏幕的位置。用户可以直接用手指触摸屏幕以实现与计算机的交互。 6)OCR技术是通过扫描等光学输入方式将各种报刊、书籍、文稿、票据及其他印刷品的文字转化为图像信息，再利用文字识别技术将图像信息转化为可编辑的文本信息的计算机输入技术。OCR的基本工作过程分为图文扫描、预处理、单字识别、后处理以及文档输出等5个环节。 7)手写输入是完全以平常的书写习惯，把要输入的字符写在一块书写板的数字化设备上，这种设备将笔尖走过的轨迹按时间采样后发送到计算机中，通过手写识别技术，将手写内容识别成相应的字符内容（如汉字、数字、字母等），从而达到手写输入的目的。 8)语音识别技术，是指通过计算机的识别和理解过程，将语音信号转换为相应的文字信息，从而识别说话人的语音指令及文字内容的技术。 9)虚拟现实是利用计算机生成一种模拟环境（如飞机驾驶舱、操作现场等），通过多种传感设备使用户“投入”到该环境中，实现用户与该环境直接进行自然交互的技术。其关键技术主要有：动态环境建模技术，实时三维图形生成技术，立体显示和传感器技术，应用系统开发工具，系统集成技术等。 * 第十二章 多媒体人机交互技术 从多媒