西北大学大学生创新创业训练计划项目申请表.docVIP

附件二： 大学生创新创业训练计划项目申请表 推 荐 项 目 名 称 项 目 类 型 所属一级学科名称 计算机科学技术 所属二级学科名称 计算机应用技术 项 目 负 责 人 申 报 日 期 西北大学教务处 制 二○一四年十月 项目简介 （注：请将字数严格控制在100字以内。） 我们设计的项目是基于语音和手势，兼顾室内和户外的交互式智能家居。  项目名称 项目类型创新项目 项目实施时间起始时间：年月 完成时间：(年月申请人或申请团队 姓名 专业 联系电话 E-mail 人 2012118117 软件工程604887589@qq 成 员 2012114106 数学与应用数学 田丰源 2013118133 软件工程 指导教师 姓名 研究方向 职称 讲师 学位 博士 主要成果一、项目实施的目的、意义 二、项目研究内容和拟解决的关键问题我们研究的整个系统一个是居家控制，另一个是户外控制，其中居家控制使用统一的终端，能够对家电进行语音控制和手势控制，户外直接用移动端链接服务器发送命令。整个系统的研究主要研究的内容包括以下三块： —— 利用讯飞语音识别实现控制对象的确定 解析成功率及速度的提升 —— 利用讯飞SDK和OpenCV解析语音和手势信号 对语音信号采用讯飞SDK辅助识别，系统将语音上传至讯飞服务器，得到对应的解析结果，而服务端提供的识别模版数量庞大，所以在满足带宽的情况下，语音识别的成功率和速度可以保障。 对手势信号采用OpenCV辅助识别，系统将用户的手势与手势库进行匹配得到动作，并且OpenCV会学习用户的手势，所以提前让系统学习用户的手势，可以提高手势识别的成功率和速度。 红外信号—— 信号自存储和转发我们采用了模拟遥控器红外信号的方式对广泛的家电进行控制的方案，解决了智能家居普及中与传统家电厂家的协商与合作的难点。对于生活中经常遇到的红外遥控设备——数字投影机、DVD、VCD、录像机、电视机等，我们采用各设备集中控制的方式，首先对各设备的红外遥控信号进行识别并存储(自学习），然后在需要时进行还原，以实现控制。 解析成功率和速度的关键问题 — 语音信号的压缩、视频流分解和灰度提取算法 由于语音识别与需要将语音信号上传到讯飞服务器，而服务端是识别效率我们不能控制，这样快速准确上传语音信号直接关系到语音识别的速度和成功率，所以在带宽一定的情况下，如何能不影响识别率的情况下对语音内容进行压缩是决定语音识别速度的关键。 手势识别在于如何把手势从连续的视频流图像中分离出来。不同图像灰度不同，边界处一般会有明显的边缘，利用此特征可以分割图像，已以提取特征点，再将输入手势的特征点与各标准手势的特征点进行匹配,通过测量两者之间的相似度来完成识别任务 三、项目研究与实施的基础条件 1. 小组成员具有一定的模式识别和嵌入式开发的相关，并掌握了C语言C++、Qt、Linux、安卓/IOS编程通信原理互联网编程数字电路模拟电路的基本知识。 2.负责人杨贤亮热爱编程，有探索研究的精神，07，08连续两年获得全国信息学奥林匹克竞赛省一等奖，13年获得西北大学程序设计大赛挑战组一等奖和计算机基础知识竞赛一等奖，第三届“汇博杯”全国大学生信息技术创新应用大赛全国三等奖；小组成员张亚璞喜爱数学，对模式识别算法有着深入了解，曾参加过14年全美大学生数学建模竞赛和全国大学生数学建模竞赛，并获得；小组成员田丰源对通信原理有着深入了解，并且对智能家居的开发有浓厚兴趣。 3. 该小组组成于2014年3月，是以嵌入式活动小组为单位，组建的开发团队，在团队中各小组成员能做到积极配合，成员间分工明确，有着良好的默契和团队凝聚力。此外，具有刻苦钻研，吃苦耐劳的精神。?我组成员已经合作一段时间，有一定的实践经验，能够很好的协调安排，具有良好的沟通能力。 1. 项目开发依靠西安市发改委工程实验室相关课题展开。开发过程涉及嵌入式开发，模式识别，红外通信和互联网程序设计。该实验室能够提供相应的实践器材，比如调试使用的开发板，耳机，摄像头等，为小组前期实践工作提供实物及测试保障。 2. 小组成员前期已经进行了模式识别和通信模块开发工作，对项目所需要的软件和硬件器材都有相应的理论储备和实践训练。 四、项目实施方案 我们研究的产品统一各个家电，将控制分为两大模块，一个是居家控制，另一个是户外控制，其中居家控制包括语音控制和手势控制，两个都是由终端解析成动作信号，再解析成红外信号发送给家电；户外直接用移动端链接服务器发送动作信号给终端。整体流程表示如下 图1 整体流程 2、控制对象的确定 为