22 语音识别 - 浙江大学计算机系统结构实验室.DOCVIP

目录 目录 2 引言 3 1. 设计概述 4 1.1. 系统结构 4 1.1.1. 平台架构（硬件组成） 4 1.1.2. 软件架构 5 2. 平台实现 6 2.1. 学习平台 6 2.2. 语音识别 10 2.3. 智能跟随 16 2.4. 跌倒检测 26 3. 应用市场展望 31 3.1 婴幼儿监护 31 3.2 婴幼儿早教 31 3.3 远程健康监护 32 引言 2011年10月13日下午5点30分，广东佛山南海黄岐的广佛五金城里，2岁女童小悦悦在过马路上不慎被一辆面包车撞倒并两度碾压，随后肇事车辆逃逸，随后开来的另一辆车辆直接从已经被碾压过的女童身上再次开了过去，七分钟内在女童身边经过的十几个路人，都对此冷眼漠视，只有最后一名拾荒阿姨陈贤妹上前施以援手，由此引发网友广泛热议。2011年10月21日，小悦悦经医院全力抢救无效，于0时32分离世。 每次看到这则新闻，你、我可能都会有很多相同的感慨，但理性告诉我们，这样的感慨能说明什么呢？行动最重要，作为浙江大学的硕士生，我们立足于学科的优势，设计出一套安全防护作用的幼儿机器人系统，希望将所学知识应用于社会。 贝贝幼儿机器人系统，具备智能检测幼儿是否跌倒，当前的行为与其平时相比是否有异样，将这些信息通过短信的方式或通过某种方式及时通知其监护人；具备实时跟踪幼儿的活动，并将幼儿的行动录制保存下来；具备学习的功能，在学习平台上，幼儿可能选择相应的学习模式，借助于语音识别、语音合成等技术完成学习功能；具备对实时跟随的设备（机器人小车）进行语音控制。 贝贝幼儿机器人系统，整合当今现有但未大范围推广的新兴技术包括：语音识别、语音合成、视觉处理、跌倒检测。在贝贝幼儿机器人系统上，通过语音识别和语音合成直接对平台进行操作，克服了通过一系列的点击才能完成的任务，可达到免使用教程的应用；通过视觉处理，完成对机器人小车对幼儿的实时跟随；通过跌倒检测技术，完成对幼儿跌倒的检测及对幼儿的导常行为进行报警。可见，通过对一系列的技术的有机合成，可以克服使用者或管理者在时间上的所做的无用功，取代人工管理、手工操作的繁琐、低效、不智能性。 本次比赛作品充分利用了凌动平台的小巧、轻薄、低功耗的特性，既是凌动平台的挑战，又是使凌动平台发挥最大的性能。在技术整合部分，有效的利用开源产品来辅助搭建整个系统平台，以达到经济、传扬开源、自身学习研究等各方面。 设计概述 系统结构 平台架构（硬件组成） 小车平台主要由上位机部分、下位机部分、和运动小车构成。上位机使用基于Linux系统的凌动平台。下位机使用CC2530。运动小车使用L298驱动，在CC2530控制下四路电机输出驱动小车。CC2530输出四路pwm波通过L298功率放大之后供给电机。小车的电机采用四个轮子独立的电机控制。每个轮胎由一个电机输出。通过调整四个轮胎电机PWM占空比，控制轮胎转速从而改变运动状态。通过调节左右轮胎不同转速可以控制小车转弯。跌倒检测模块单独使用zigbee模块CC2530和加速度传感器，使用单独的供电系统供电。 被检测者身上的模块有无线MIC、跌倒检测模块。跌倒检测模块由CC2530和上位机实现zigbee通信。发送跌倒状态信号。跌倒检测通过三轴加速度传感检测跌倒状态，滤去杂波防止误报。 硬件根据功能自主拼装。采用大赛规定的凌动平台作为主要的处理机。凌动平台为我们提供了大于1G的主频和双核CPU，它强大的处理能力可以让我们实时处理640*480的RGB视频流。虽然偶尔有丢帧之类的错误发生但是总的来说可以保证运动底盘可以实时做出反应。主机还使用了ZIGBEE网络和无线MIC模块作为和被监控者的交互。凌动平台使用带保护的锂电池供电 小车底盘使用了四个电机。使用单独的动力电源设计，可以保证提供充足的电力，凌动平台和小车底盘使用不同的电源供电可以确保动力的电池上的纹波不影响凌动平台的供电。 主机和被监控者的通信使用两条通道通信。一条是无线麦克风构成的音频通道。另一条是由ZIGBEE模块CC2530构成的信号传送数据通路，作为无线传感网，我们只是使用了点到点的传输。但是也为我们使用多点的信号提供了可行性，也就是一个主机监控多可被监控者。无线传感网的低功耗性，可以保证被监控者受到更小的辐射。我们使用了2.4g，10mw的无线传感网模块。 CC2530是一块集成2.4G ZIGBEE和C51内核的可编程模块，对他的编程类似于51编程，本模块自带 AD , IO , PWM等设计必须的模块，集成度高，可以满足小车的设计需求。 软件架构 软件架构说明： 本系统的平台采用的是：TimeSys发行版的Linux系统（Timesys Bowler release 14）Qt Creator 2.4.1。 本系统软件平台编程语言：上层采用C++编写，下层