信息科学与技术学院大学生创新创业训练计划项目可行性研究报告.docVIP

信息科学与技术学院 大学生创新创业训练计划项目可行性报告 项 目 名 称 自然交互式智能家居开发 项 目 类 型 创新训练项目 所属一级学科名称 HYPERLINK /view/92404.htm \t _blank 计算机科学技术 所属二级学科名称 计算机应用技术 项 目 负 责 人 杨贤亮 申 报 日 期 2014.10.27 项目简介 （300字以内） 随着科技水平的提高，人们对自动化家居的期盼也与日俱增。而我们的项目就满足了大众的这一需求，它旨在设计一个基于语音和手势，兼顾室内和户外的无设备家电控制系统，以实现交互式智能家居。 在室内，用户可以先通过语音唤醒系统，然后发出语音指令，系统接受指令并解析成红外信号控制家电，整个语音识别过程通过讯飞SDK辅助。抑或，用户做出手势，系统对比手势库识别手部动作，进而得出用户指令并解析成红外信号控制家电，整个手势识别过程使用OpenCV辅助。 在户外，用户操作移动端（例如手机），通过远程服务器发送控制信号至室内终端控制家电。同时，用户也可以通过摄像头随时侦察室内的状况。 一、项目实施的目的、意义 如今，人们对生活品质的追求越来越高，尤其在家居方面，一个安全、便捷的智能家居环境成为了人们所追求的目标。想象这样一些生活场景：当天蒙蒙亮时，面包机和榨汁机已开始为睡梦中的你悄然地工作；当外出工作或游玩时，你可以通过手机了解到各家用电器的工作状况并及时做出调整；当即将家中，你还可以用语音和动作任意控制你的家用电器，让它提前为你调试家里温度、烧水做饭；当回到家里，慵懒的你躺在客厅沙发上，只需要一个声音控制或一个简单的手势操作就可以打开电视，挑选自己喜爱的电视台；当夜幕降临你躺在已调试好温度的床上，疲惫的你一声“关灯”即可安然入梦，当你…… 现有的家电都是直接在家电上控制，或者是用专门的遥控器，虽然可以完成对家电的控制，但是不够方便，通用性不够，控制范围有限，而且操作较为繁琐。我们所设计的智能家居系统就是要帮助人们简化操作步骤，统一不同电器的操作方法，随时了解家电状态保证居家安全，随时无设备控制家电方便人类生活。 整个项目中不可避免的会遇到以下问题： 控制对象难易确定 在室内控制中，如何确定控制的对象，是整个研究的一个重点，家电之间空间距离小，控制过成中容易控制对象判定错误或者无法判定等问题。 控制信号解析的成功率和速度 系统识别用户控制信号的成功率和使用时间，直接关系到研究成功与否，所以准确快速的解析出语音和手势是研究的核心，解析用户语音或者手势出错，可能会造成对家电的错误控制或者控制失败，而相应速度过慢也会影响使用体验。 统一不同家电的红外信号比较繁琐 不同家电的红外信号的结构有着显著差异，统一他们之间的差异自存储和转发的能力。 二、项目研究内容和拟解决的关键问题 我们研究的整个系统一个是居家控制，另一个是户外控制，其中居家控制使用统一的终端，能够对家电进行语音控制和手势控制，户外直接用移动端链接服务器发送命令。整个系统的研究主要研究的内容包括以下三块： 利用讯飞语音识别实现控制对象的确定 为了确定控制对象，我们需要预先设定待控制家电的名称，控制中将语音识别的范围限定在候选家电之中，可以较为准确的确定控制对象。 利用讯飞SDK和OpenCV解析语音和手势信号 对语音信号采用讯飞SDK辅助识别，系统将语音上传至讯飞服务器，得到对应的解析结果，再将解析结果进一步整合成完成的动作；对手势信号采用OpenCV辅助识别，系统将用户的手势与手势库进行匹配得到动作，在整体计算移动方向得到完整的动作。 红外信号的自存储和转发 我们采用了模拟遥控器红外信号的方式对广泛的家电进行控制的方案，解决了智能家居普及中与传统家电厂家的协商与合作的难点。对于生活中经常遇到的红外遥控设备——数字投影机、DVD、VCD、录像机、电视机等，我们采用各设备集中控制的方式，首先对各设备的红外遥控信号进行识别并存储(自学习），然后在需要时进行还原，以实现控制。 系统研究中拟解决的关键问题有： 加快识别的速度 由于语音识别与需要将语音信号上传到讯飞服务器，所以在带宽一定的情况下，如何能不影响识别率的情况下对语音内容进行压缩是决定语音识别速度的关键。 2、提高手势识别的成功率 手势识别成功的关键在于如何把手势从连续的视频流图像中分离出来。不同图像灰度不同，边界处一般会有明显的边缘，利用此特征可以分割图像，已以提取特征点，再将输入手势的特征点与各标准手势的特征点进行匹配,通过测量两者之间的相似度来完成识别任务，所以视频流的分解和灰度提取是关键。 3、保证远程交互的正确性 户外控制需要远程服务器，所以利用域名解析技术准确找到服务器是