张文静_基于Kinect手势提取识别应用研究.docVIP

大学生创新训练计划项目 申 请 书 项目名称:基于Kinect的手势提取及识别研究 项目负责人：张文静 学号：0304110631 专业：计算机科学与技术 所在学院：物联网工程学院 联系电话 电子信箱：fionazhangchina@ 第一指导教师:顾德 职称/学历：副教授/博士 填表日期：2013 年 8 月 30 日 江南大学教务处制 项目名称 基于Kinect的手势提取及识别研究 项目实施时间 起始时间：2013 年 9 月； 完成时间：2014 年 9 月。 项目负责人情况 姓 名 张文静 性 别 女 民 族 汉 出生年月 1991.12 所在学院 物联网工程学院 学号31 所学专业 计算机科学与技术 联系电话E-mail fionazhangchina@ 项目组成员(不包括项目负责人) 姓　名 性别 学号 所在学院 所学专业 项目分工 金科 男 0304110608 物联网工程学院 计算机科学与技术 算法性能分析 颜潇雨 女 0304110529 物联网工程学院 计算机科学与技术 撰写研究报告 赵富文 男 0304110320 物联网工程学院 计算机科学与技术 代码编写 李越宁 男 0304110409 物联网工程学院 计算机科学与技术 代码编写 第一指导教师情况 职称 副教授 专业 控制科学与工程 研究领域 机器视觉与图像处理、无线传感器网络 姓名 顾德 性别 男 年龄 30 学历/学位 博士 所在学院 物联网工程学院 手机 E-mail gude@ 第二指导教师简况 姓名 性别 职称 专 业 所在学院 手机 项目摘要（100字左右） 本项目采用微软的Kinect 摄像头，通过肤色识别和深度分割的方法，对手势进行提取和识别，然后进行编程实现相关算法，达到用手势代替鼠标进行屏幕操作的目的，如左击、右击、换页、开启、关闭、暂停、放大、缩小等。 1、项目的立项依据（包括项目的研究意义、应用价值、国内外研究现状分析，并附主要参考文献目录） （1）项目的研究意义与应用价值 随着计算机技术的迅速发展，人与计算机的交互活动逐渐成为人们日常生活的一个重要组成部分。鼠标、键盘等传统的人机交互设备在使用的自然性和友好性等方面存在一定的局限，因此研究符合人际交流习惯的人机交互技术，建立和谐自然的人机交互环境成为当前的发展趋势。手势是一种自然直观的交互方式，表达意义丰富便捷，因此手势识别是当前人机交互的研究热点。 国内外研究现状分析 新型的人机交互技术是当前的研究热点,如M Akay等提出了一个基于语音识别,手势识别和眼睛跟踪的远程医疗系统。S Pastoor等构建了一个多媒体实验系统,让三维数据可视化,该系统通过眼睛来实现人机交互,查看所要的信息,不需要其他交互设备。国内的高文教授等提出了一个基于手势识别和唇读检测的方法,使得聋人可以和计算机交流,进而和正常人进行交流。如上所述,新型的人机交互技术是当前的研究热点,并且该技术带给人们全新的人机交互体验。手势作为一种自然且符合人的行为习惯的交互方式,具有天然的友好性和直观性,是作为新型人机交互技术的理想选择。手势能表达的含义有很多,从手的结构来分,手势可以分手掌和手指两部分;从手的移动角度看,可以分解为水平,竖直和深度三个方向的移动。这些信息所表达的不同含义,可以用来作为控制信息,能够实现类似于鼠标控制的应用,比如图片的查看、窗口的移动等等。 传统的手势跟踪方法,有基于数据手套和基于计算机视觉两种方法。基于数据手套的方法优点是响应速度快,精度高,缺点是用户需要佩戴数据手套,行动受限制。而基于计算机视觉的方法根据使用的摄像头的数目分为单个摄像头和多个摄像头两种类型。如果只使用单个摄像,无法获取到手势的深度信息,只能获取到手势在二维平面的投影信息,如果想要获取到手势的深度信息的话,需要用多个摄像头,或者采用深度摄像头。另外,为了减少干扰,基于计算机视觉的手势跟踪方案往往需要将手部放置在某个背景简单且固定的地方,在计算时再做减背景的操作,以提取手的部分,但是,这种方法对于用户的限制太大,不太实用。 本项目所使用的Kinect,带有一个RGB摄像头和一对由红外发射器和CM