便携式任意墙面触控装置系统设计.docVIP

便携式任意墙面触控装置系统设计 摘要：人机互动技术作为一种人与计算机之间进行信息交互的技术，是一项十分热门的研究领域，并在近年来取得了不错的发展。但是，人们对于人机互动体验的要求也在逐渐的提升。在大屏幕的互动领域，投影技术应用广泛，可以展示相关文字、视频，达到的人机互动的效果。但是受限于键盘鼠标的操作方式，它并不能达到自然的互动效果，因而不能满足日益增长的互动需求。 基于体感传感器的任意墙面触控与体感控制技术作为一种虚拟现实技术和动感捕捉技术，目前被广泛的运用在大屏幕人机互动系统中。 针对在大屏幕人机交互中可能出现的跟踪定位不精准，用户互动体验差等问题，本文提出了一种基于3D传感器(Kinect)的联合滤波算法。该系统采用Kinect，对一个投影面进行扫描，然后通过Kinect的深度摄像头接受红外信号，并将这些信号经过联合滤波处理发送给控制主机，从而达到与计算机进行实时的人机交互的需求。 关键词：人机交互 Kinect体感技术 投影互动 虚拟现实 前言 人机交互技术简单地来说就是人与计算机之间进行信息交换的技术，既是计算机给人提供信息的通道，也是使用者控制计算机的途径。作为这样一种连接人与计算机的重要技术，它一直受到计算机行业的密切关注，并且引起了相关领域的激烈竞争。 随着计算机和多媒体技术的不断发展，人机交互也在逐渐趋向自然化与智能化。而体感与触控技术的出现，更是将人机交互技术的发展推动到了一个新的阶段。作为一种虚拟现实技术，体感控制技术与现有多媒体技术的结合无疑将变革现有的人机交互方式，并且在今后的教育、会议、娱乐等各行业都将具有广阔的发展空间。除此之外，体感与触控技术的应用还将大大改进用户的互动体验，借助体感传感器与多媒体技术，使用者可以摆脱键盘鼠标的限制，以一种更加直接、自然的方式进行计算机的操作。对比原有的互动方式，这种方式显然更加地引人入胜。 本文所介绍的便携式任意墙面触控装置系统将借助Kinect传感器，对任意墙面投影上的红外笔或者是手势进行动作捕捉，并结合自主开发的人机互动软件平台，实现以红外笔或是手势直接在投影面上操作计算机的功能。同时结合电子白板等技术，让使用者可以随时进行书写画图等操作，达到实时自然的人际互动效果。 本文将详细介绍本系统的硬件设计与滤波算法部分设计，并根据实验验证本系统的使用性能是否能满足互动的需求。 第一章 绪论 1.1人机互动的发展与现状 自上世纪60年代第一台计算机诞生以来，人机交互就开始逐渐发展起来[1]，从语言形式的交互界面到图形化的交互界面再到多媒体形式的交互界面，直至现在的自然化智能化的交互技术[2]。 在最初的语言形式的用户界面中，由于计算机语言的专业性和复杂度，极大地限制了人们对于计算机的使用，只有掌握了计算机语言才能进行有效的人机交互操作，这也使得计算机的使用被局限在少部分专业人士手里。正因如此，人们不断探寻新的人机交互方式。 而随着Windows这一图形用户界面系统的出现，人机交互突破了专业性的限制，使得大部分人都可以通过轻松完成一些最基本的计算机操作。对比于原先的语言形式的人机交互，这种图形界面的操作方式显然更加符合人的认知习惯，更加直观而且易于操作。 在近些年，多媒体技术的发展也使得人机交互的形式更加丰富多彩。多媒体技术可以满足人机交互所需的信息传输，交互等条件，其发展与人机交互的发展可以说是相互影响、相互促进[3]。 现在，人机交互技术的发展正面临着新一轮的变革。一些新技术的不断发展和应用，比如体感技术、人工智能、虚拟现实技术等，能极大地提高人机的互动效果。从目前发展相对较迅速的体感控制技术来说。体感控制技术凭借其特性已经应用在医学、商业、计算机科学及机器人等很多领域[4]。 例如，在医学领域中，瑞士伯尼尔大学的Michael.Tully教授等研究人员借助Kinect传感器设计了一种可以浏览医学影像和信息的系统。该系统运用体感技术，可以直接用手控制图像浏览，利用Kinect非触摸的体感方式[5]可以有效的避免手术中可能出现的由于接触产生的感染，提高手术的安全性。 又如远程手术技术，体感控制也起到了重要作用。西雅图华盛顿大学Biorobotics实验室的Chizeck等让Kinect传感器在远程手术过程中为外科医生提供触觉反馈，将Phantom Omni[6]触觉设备与Kinect设备连接，并且建立患者的3D模型，这样身在异地的医生可以通过装置为患者进行手术。 在科技助残方面，德国康斯坦茨大学的Michael.Zollner等开发的视觉障碍导航辅助(Navigational Aids for the Visuall