新型人机交互设备的设计与研究.docVIP

新型人机交互设备的设计与研究 中科院计算所 二零一零年五月 一.开展本课题研究的意义 人机交互（Human—Computer Interaction）技术早已成为当前信息产业的竞争的焦点，而人机交互技术已经被各国作为重点研究的关键技术之一，美国总统信息技术顾问委员会的“21世纪的信息技术报告”中将“人机交互和信息管理”列为新世纪4项重点发展的信息技术（还包括软件，可伸缩信息基础设施，高端计算）之一。我国国家自然科学基金，国家重点基础研究发展计划（973）、国家高技术研究发展计划（863）等项目指南中，均将先进的人机交互，虚拟现实等技术列为予以特别关注的资助项目。二.国内外研究现状分析。 “SixthSense”（第六感）是一种可穿戴式手势界面控制系统，用户可利用身边的物理世界进行数字化操作，以及手势控制，这套用户界面由MIT媒体实验室研发。用户可以实现的功能包括，用手指拍照，缩放地图，打电话、手表或是查阅电子邮件。甚至可以利用报纸实时观看新闻视频或其他动态信息。“第六感”的原型机由便携式投影机、镜子、摄像头组成。硬件部分全部使用便携式硬件，可穿戴式设计。投影机和摄像头平时可以放置在口袋中。墙壁表面、任何有形物体的表面都可以作为操作面使用。 麻省理工学院三.研究目标、内容和拟解决的关键技术 1戒指 数据采集工作，主要是利用麦克风采集敲击和拖动的震动的特点和利用加速度传感器采集手指运动的趋势。由于在戒指中内置电池会导致体积过大，而又由于戒指是环状结构，刚好可以做成线圈形状，所以可以将戒指做成一个无线输电用的接收线圈。 2手表 手表端主要作为对采集数据的预处理和伺服工作。对采集到的数据进行分析，得出结论。然后送回到PC或者手机，数据在手标端进行处理的原因是为了降低后端的计算负担，并且提高兼容性。因此无论是手机或PC都可以同样兼容该设备而不受硬件计算速度的限制。 这个方案可以方便的扩展，甚至可以每个手指一个，实现多手指的识别。 拟采取的研究方法、技术路线和可行性分析 主要应用技术与需要解决的问题： 双MEMS加速度传感器的运动采集 由于本系统需要采集的数据是人体手指的运动状态而不是手臂的运动状态，所以实际上我们平时所采用的参考系是以外部环境以参考系就不能适用。这个系统的参考系应该是使用者的手腕，所以当使用者运动手腕手臂或身体时，手指并不能因为手腕手臂或者身体的运动而在系统中产生一个运动的动作。我们知道计算一个相对参考系的运动是很简单的，只需要知道运动物体和选用参考系相对外部空间的速度，那么其运动趋势就可以通过矢量差的方式得到。当然为了避免一些类似于手臂圆弧运动的情况(手指不运动，但是由于角速度相同，导致手指的速度高于手臂)，我们会在算法中通过以下方法修正（其中L和l分别为统计的平均臂长和手长）。 这也是这个系统分别在戒指和手表中分别安装加速度传感器的用意所在。 基于运动传感器的动作采集算法 为了方便后端设备的使用，和驱动的简化，实际上我们希望通过系统本地的计算返回给终端设备一个趋势的参数而不是复杂的完全运动指标的参数。所以本设计中关于运动采集后的处理的算法也会做一定程度的讨论。 双麦克风差分场景消噪 我们知道，用麦克风对外界采集声音往往会伴有场景噪音，而这些场景噪音往往会对最终的结果判断产生或多或少的影响，为了削减场景噪声对系统产生的偏差。我们采用了双麦克风的差分去噪的方法： 系统主要采集的是手指敲击桌面或者滑动时发出的声音，采集该声音的麦克风安装在戒指里侧，这样便于通过骨骼的传导使声音尽可能的被麦克风采集。而第二支麦克风安装于戒指外侧，这样更有利于采集场景带来的噪音。 最后得到的信号为 因为戒指内侧的麦克风采集的声音会因为人体所衰减，所以λ为待定系数且λ1。 基于能量和波形的端点检测 系统最终的动作的形成，不仅仅是通过手指运动得到的，还有一个概念就是“行为”，这个概念在本系统里可以简化为三个不同的状态：舞动、点击、滑动。其中后两者是必须通过上文提到的麦克风系统采集的。然后通过算法对敲击或者滑动声音的能量和持续性的判断来决策是否为系统所谓的“行为”。 无线数传模块 无线输电技术 五.预期研究成果与创新之处 六.已有工作基础七.研究计划和预期进展 八.参考文献 人机交互风格及其发展趋势马卫娟[1]?方志刚[2] [1]浙江大学外语学院?[2]浙江大学CAD＆CG国家重点实验室 *才海男 (哈尔滨工业大学　哈尔滨　150001) 周兆英　　李　勇　　张文栋 (清华大学精仪系　北京　100084) 3. MEMS加速传感器硬件电路设计与信号处理的研究 基于nRF905无线数传模块的设计及其实现 作 者： 吕跃刚?高晟辅?范俊峰?王晏晏?LV YUEGANG?GAO SHENGFU?FAN JUNFE