虚实融合环境下体感交互技术应用.docVIP

虚实融合环境下体感交互技术应用 　　中国古代兵器文化经历了漫长而悠久的发展过程，留下了极为丰富的文化遗产，可以说都是中国古代劳动人民智慧的结晶。本文通过对山东孔子文化公园兵器博物馆展示多媒体项目的设计和实施，探讨在虚实融合环境下运用新兴的体感交互技术构建一种高度逼真的展示体验环境和人性化操作方式。 　　概述 　　一直以来国内历史类文化展览馆的展示交互设计多采用二维人机交互方式，但随着数字技术的不断发展，信息传播方式的不断变革，这样的形式已经不能够满足人们猎奇逐新的需求，人们尝试运用更多的媒介和技术手段来提高观众和展示环境的互动。本文希望通过对山东孔子文化公园兵器博物馆展示多媒体项目的设计和实施，探讨在虚实融合环境下运用新兴的体感交互技术构建一种高度逼真的展示体验环境，让人们身历其境地与内容做互动，诠释中国古代兵器从启蒙到发展再到兴盛的整个过程。 　　虚实融合环境下的体感交互技术 　　虚实融合是现代展示环境设计中一种常用的设计手法，它通过虚拟显示技术，结合计算机图形学、数字图像处理、环境场景搭建、物理学、心理学等相关学科交和领域，营造出一个虚实结合并符合特定展示情景的展示环境，让观众更加流畅的和计算机等设备进行人机交互，增加参与度和体验感。 　　体感交互是展示空间中营造虚实融合环境最为重要的技术手段之一，也是目前展示环境设计的主要趋势。体感交互起源于游戏，特指用户通过身体运动和身体感受等方式完成人机交互，它通过人的肢体动作变化进行操作。体感交互技术运用在展示环境设计还是近些年的事情，这种技术操作简单，是直接通过观众的肢体动作自然得与周边的装置或环境互动，而无需使用任何复杂的控制设备。有着其他展示技术无法比拟的优势。 　　目前体感交互的研究内容主要是集中在语音识别、手势输入及感觉反馈等方面。作为新的体感技术，kinect 的出现促进人机交互的发展，它可以依靠捕捉使用者的动作、面部和语音的识别，来进行输入填补了传统人机交互的技术缺陷，kinect体感交互技术主要由感应摄像机，动作识别系统组成。 　　1.深度感应摄像机技术 　　早期，由于用于体感交互技术硬件和软件的研发成本比较高，体感交互技术一直缺乏实用性，直到一项基于结构光技术的新专利Freedman 的出现，通过对空间物体投射特定的红外线结构光斑，重构空间的三维图像深度，达到较高的帧速率采集数据，这项就是Kinect 的核心技术，使低廉但高效的体感交互设备成为可能。 　　2.动作识别算法 　　依靠实时深度摄像机技术，人体动作识别算法得到了提高，可以根据需要，区分人体躯干的各个部分的运动，再通过反向动力学将这些数据连接到人体运动，当然，这样需要计算机系统需要大量的计算，同时用户需要把动作进行初始化，后来Ganapathi的方法结合了人体结构分析与爬山算法，通过GPU加速技术提高了算法的效率。 　　3.主要的设备 　　（1）RGB 摄像头 　　用来获取 640X480 的彩色图像，每秒钟最多获取 30 帧图像，根据在Kinect 设备视野范围内移动的一个或两个人的图像进行骨骼追踪，可以追踪到人体上的 20 个节点。 　　（2）3D深度传感器 　　分别为红外发射器和红外线 COMS 摄像机，用来侦测 3D 影像。 　　（3）数组式麦克风 　　数组式麦克风的 Microsoft.Speech 与语音识别 API 集成，使用四元麦克风组的麦克风，可以消除噪音和回波进行语音识别，把声源附近有效范围之内的各种信息捕捉到。基于以上功能，Kinect 设备不需要使用任何控制器，只需依靠实时捕捉使用者的 3D 动作、面部识别和语音识别即可达到输入的功能。 　　兵器博物馆体感交互技术如何营造虚实融合的空间 　　山东孔子文化公园兵器博物馆，是孔子文化园（国家AAA级景区）新开发的一个旅游景点。主要展示中国传统的古代军事装备。由于中国古代兵器文化经历了漫长而悠久的发展过程，留下的文化遗产极为丰富，如果采用传统的展示方式，使用大量的图版、展柜和展示道具，观众可能只是走走看看，很难有切身的感受。为了增加展示的效果，笔者的设计团队决定采用虚实融合设计手法，运用体感交互技术，让观众能够实现“身临其境”。 　　1.设计思路 　　通过对孔子文化公园兵器博物馆的调研，包括对传统兵器背景、观众和展示交互技术等方面的调研，我们确定了具体的方案，首先，在明确了以虚实融合作为交互设计的主轴后，建立起一套完整的展示交互架构，构架基于虚拟现实系统和具体的场景，构筑观众与兵器博物馆的互动平台，配合情境，多媒体交互，视觉等设计的内容，然后，根据前期制定的设计路线，结合兵器博物馆空间区域的划分和实际的展示内容，把需要设计的每个空间逐个进行分析，并制定具体的多媒体展示交互方案。最后进行实施和调