新式交互设备在人机交互技术课程中应用.docVIP

新式交互设备在人机交互技术课程中应用 　　摘 要：人机交互是一门研究如何设计、评估和实现交互式系统及相关知识的学科。为了让学生深入了解新式的人机交互方式，在课程实践环节引入新式交互设备，学生对新设备表现出浓厚的兴趣，利用这些设备自行设计许多新颖的应用软件，开拓思路，增加开发经验，提高自学新知识的能力。文章对上述课程实践进行阐述。 　　关键词：人机交互；人机交互设备；新型交互设备；Kinect；Leap motion 　　1 背 景 　　人机交互（human-computer interaction）是一门研究如何设计、评估和实现交互式系统及相关知识的学科[1]。人机交互是计算机学科中的传统学科，从计算机诞生的第一天起，人们就在考虑如何设计出更好的人机交互方式。传统的鼠标键盘等交互设备已经不能满足用户的需求，人们希望能够高效便捷地对电脑进行操作，因此诞生了语音交互、手势交互和动作交互等新颖的交互技术。另外人机交互也不局限于某种单一的交互方式，而是多种交互方式并存，共同完成交互任务。 　　作为一门专业基础课，用户交互技术课程在教学内容上结合软件工程概念，目的在于培养学生理解用户交互界面设计的原则，掌握新式用户交互技术的原理，能够自行设计开发基于新式交互技术的应用程序，使学生在相关行业领域中具有更高的创新性和竞争性。传统的人机交互课程往往局限于介绍认知模型、设计界面元素等知识点，不能引导学生进行实例开发，更不要说接触日新月异的新式交互设备。为了让学生更加深刻地了解人机交互技术的最新进展，可以在课程中引入多种新式交互设备，包括Kinect、Leap motion、智能手表、VR设备等，并基于这些设备设计相应的实验和项目。 　　2 新式交互设备 　　人机交互方式经历了命令行交互阶段、图形用户界面交互阶段和自然和?C的交互阶段[2]。在命令行交互阶段，由于计算机价格昂贵、普及性不高，与计算机进行交互的是专业的程序员。随着硬件成本的降低，计算机进入了千家万户，面向普通用户的软件越来越多，命令行界面也逐渐发展为图形界面，并且界面上的交互元素种类日渐丰富和美观。由于图形界面易于理解，操作简单，因此目前这种交互形式占据了主导地位，成为使用各种软件的主要手段。 　　为了适应人们的娱乐、教育、购物及社交需求，许多新式交互设备开始崭露头角。这些设备彻底改变了传统的人机交互概念，现在我们可以通过手势、动作、语音等更自然的方式来操作计算机，这些提高了交互的效率，增加了交互的趣味性，最终使得人与计算机的关系变得更加紧密。新型交互设备的出现使得人机交互方式进入一个新阶段，为这门学科带来了新挑战。 　　新式交互设备可以分为体感互动设备、语音交互设备、可穿戴式设备、虚拟现实设备等。每种类型的设备包含的具体产品见表1。由于分类并不是相互独立的，因此某些设备会同时出现在不同分类中。 　　2.1 体感互动设备 　　Kinect是微软开发的Xbox360主机的周边设备。Kinect里安装了3个镜头，中间的镜头是RGB彩色摄像机，用来获取物体的彩色图像。左边镜头是红外线CMOS 摄影机，右边镜头是红外线发射器。这3个镜头配合工作可以采集到视场中物体的彩色信息和深度信息。Kinect附带的软件可以识别使用Kinect的玩家，最多能识别6个人。除此之外，Kinect还能获取人的全部关节（joint），从而得到玩家的骨架模型。另外，人的手部关节也一样能被识别出来（包括所有指尖和关节），因此，Kinect也可以作为手势识别的设备使用。 　　Kinect已从1.0版本升级到了2.0版本，目前主要作为参与游戏互动的工具，但是考虑到Kinect的强大功能，除游戏以外其他的应用（例如教育培训）也在利用它完成不同的功能需求。 　　Leap motion是一款体感控制器。它通过红外线追踪手部移动，并且准确识别出手指的各个关节和骨骼位置。Leap motion与Kinect类似，但是只能进行手势识别。通过Leap motion，用户可以通过双手动作来操作计算机。跟传统的鼠标键盘输入相比，Leap motion的使用显然更加自然有趣。 　　2.2 语音交互设备 　　随着深度学习的出现，语音识别算法的识别精度越来越高，最近在数据库上的测试甚至超过了人类水平，因此语音识别软件变得非常普及[3-4]。这种交互方式虽然不需要特殊的设备支持，但是仍有些新出现的语音交互设备值得关注。亚马逊最近推出了一个名为Echo的设备，用户可以将智能家居中的电器连上Echo，通过命令Echo完成对电器的自动化操作。另外前面介绍的Kinect除了包含深度相机外，还有一个语音识别装置，Kinect附带的驱动软件能够记录用户声音并且分析用户命令。 　　2.3 可穿戴式设备 　　由于可穿戴式设备