Kinect视觉技术在儿童Flash多媒体中研究.docVIP

Kinect视觉技术在儿童Flash多媒体中研究 　　摘要：现有儿童多媒体技术存在交互方式不自然、不智能的缺点，应用基于Kinect自然的人机交互技术并结合Flash技术，以儿童火灾自救的多媒体课件作为实例，设计实现一种多媒体自然人机交互平台。在该平台上的多媒体课件主要采用手势识别技术实现人和计算机的自然地交互，同时配合网络技术达到协同互动的效果，该平台目前运用于梧州市某幼儿园，通过实践证明，是有效和实用的。 　　关键词：Kinect体感技术；Flash多媒体；多人互动 　　中图分类号：TP37 文献标识码：A 文章编号：1009-3044（2015）12-0206-04 　　当今，儿童身心成长及健康发展成为社会关注的一个重要话题，如何创造条件促进儿童心智的开发，受到家庭和教育领域普遍关注。 　　多媒体以其特有的声、光、形、色的特点，能够创造丰富多彩的语境，使其成为教育教学的一个有效手段。然而，它缺乏人机自然交互的技术，使现在大部分儿童多媒体教学还停留在以鼠标和键盘这种不适合儿童这一特殊群体的交互方式上，给儿童的身心健康带来一定的负面影响。而随着计算机视觉技术的大力发展，人机自然交互变为了现实，但是视觉技术开发难度大、成本高、周期长，难于普通到教育环境中，当前大多应用在商业化游戏上，这些游戏也不利于儿童身心健康的发展。本研究力求以一个熟悉Adobe多媒体开发平台的幼儿园教师身份运用Kinect开发包将Kinect深度摄像头应用在Flash Professional CS6.0环境下，借助网络技术，搭建多媒体多人自然互动课件，为计算技术视觉技术能够普及应用到儿童课件开发中提供一个方案。 　　本研究将以儿童火灾自救的多媒体课件开发为例来说明上述研究，该课件的内容由一位资历深厚有研究过儿童教育的教师提供的，具有深刻的现实意义，但是长期以来该内容的教学都无法在现实中给孩子模拟与实践，这恰好给计算机视觉技术结合多媒体技术提供一个展示的机会。 　　1 平台环境的搭建与课件设计目标 　　平台搭建的环境如图所示，至少需要两台PC机、两部Android手机和两台Kinect设备及对于外围设配的止滑垫，防止儿童在互动中摔倒。 　　该课件应当满足如下条件： 　　1）图文并茂，声像俱佳，动静结合等，总之界面应当丰富多彩，能吸引儿童。 　　2）教师、儿童与多媒体课件的互动不仅仅停留在视、听觉或者鼠标键盘的互动，而是沉浸式的体验，通过肢体与场景中相关的虚拟模型进行交互。 　　3）该课件不仅满足多人互动，而且应当突破在课堂上的应用，即在儿童与课件互动时，远程的父母可以在办公室或者家里，甚至任何地方的PC机或Android手机等移动设配接入网络进入课件，可以观看或者协助儿童共同完成某项任务，当然儿童也将课件拷贝回家，在条件允许的条件下与父母共同游戏。 　　总之，将多媒体技术、计算视觉技术、网络技术相结合，为幼儿教学创造更多的寓乐于教的条件。 　　2 儿童火灾自救课件设计 　　2.1 人物和道具的提取 　　根据儿童火灾自救内容：突然一栋大楼起火了，大家都在混乱中逃生。这时候有一个房间，房间里有4个孩子，他们的父母都不在家。突然，其中的一个孩子看到窗外黑烟滚滚，知道大楼起火了，他马上告诉大家赶紧逃生。但是，他们跑到门口的时候，发现门不知道什么时候被重物挡住了，根本打不开。这些重物很重，一个人根本搬不动，需要2个人一起才行，而且又很多，需要一段时间才能搬完。此时，黑烟已经源源不断地从窗口和门缝钻进来，孩子们意识到根据这样的速度搬运重物，还没有搬完就有可能被黑烟窒息。突然，天花板上的电线由于短路，掉到地上，不断漏电，导致屋内很多地方都不能行走。在这个紧要的关头中，其中一个孩子想到赶紧关闭电源防止漏电；另一个孩子想到了洗漱台上有毛巾，可以用来沾水捂住鼻子和嘴，防止黑烟熏着；还有一个孩子也意识到单靠他们的力量是不够的，于是想起房间里还有一部电话，可以拨打119告诉火警叔叔。于是这些孩子就在他们自己有组织，有目标的合理安排下，完成在火警叔叔没有来到之前的自救方式。 　　在开发课件之前，我们首先根据课件的内容提取涉及的背景和道具，如图2所示。 　　根据儿童火灾自救内容，孩子总共有四人，按照一定的行走路线，施行自救，其自救完成的任务总结如下： 　　1）去切断电源，关闭电灯。 　　2）到洗漱台上拿湿毛巾。 　　3）分发湿毛巾。 　　4）拿着小椅子到桌边。 　　5）拨打119火警。 　　根据儿童火灾自救内容提取的人物和道具之后，下面分别对它们进行设计。 　　2.2 道具的设计 　　对于道具的设计需要从静止和可以移动的角度去考虑它们。 　　1）根据课件内容，静止的道具有洗漱台、桌子、电话、电灯。对于桌子是完全静止的，或者说至始