高速手势识别系统解决方案.docx

PAGE 1 PAGE 1 高速手势识别系统解决方案 1设计摘要  目前，讨论自然化的人机交互是当今计算机科学技术领域的主要讨论热点之一，手势输入作为一种自然、丰富、直接的交互手段在人机交互技术中占有重要的地位。本项目提出以Xilinx公司Spartan 6系列FPGA为器件的手势识别系统设计的方案，采纳FPGA芯片的内置DSP硬核作为手势识别模块的,负责图像识别算法的实现，采纳FPGA作为图像采集模块的掌握中心,负责图像的采集,完成预处理和摄像头聚焦和云台的掌握工作，以FPGA高速强大的处理力量保证了系统的实时性。手势识别部分融合人手颜色信息和手势运动信息，利用种子算法对简单背景下的手势进行分割。依据分割出的手势区域大大加速了运动特征参数的提取,并结合手势区域的外形特征,建立手势的时空表观模型。识别时，采纳独立分布的多状态高斯概率模型，进行时间规整，通过DSP和FPGA在处理不同结构算法的优势, 大大提高了手势识别的处理速度和精确?????性。高速性将是该手势识别系统突出的优点，可实现更高层次产品的开发并扩大应用前景。  2项目背景  讨论自然化的人机交互是当今计算机科学技术领域的主要讨论热点之一，手势是一种自然、直观、易于学习的人机交互手段,手势输入是实现自然、直接人机交互不行缺少的关键技术。目前的手势识别技术主要分为基于数据手套和基于视觉两种。基于视觉的动态手势识别系统更是当前科学讨论领域的热点之一。手势输入作为一种自然、丰富、直接的交互手段在人机交互技术中占有重要的地位。  尽管手势识别技术的起步比较早，但绝大多数只是简洁的停留在软件层次上，这些技术有的只是进行简洁的比对，速度比较慢，实时性比较差，另外一些这是识别效率较低。因此需要一个从硬件上着手，特地用来识别手势的设备，以弥补上述两个方面的不足。  以现场可编程门阵列FPGA作为器件来完成图像的采集和预处理系统，该系统具有小型化、集成化且实时性好、敏捷性高的特点。该系统将一些单调、不简单、工作量大且耗费时间的处理交给FPGA来完成，不仅能充分利用FPGA速度高的优越性，也能为DSP供应更多的时间进行更简单的手势图像分析，使得手势识别的结果更为牢靠，提高了整个系统的性能。近几年具有乘法器及内存块资源的大容量FPGA以及基于IP核嵌入的FPGA开发技术的消失,可以将嵌入式微处理器、专用字器件和高速DSP以IP核的形式便利地嵌FPGA,以硬件编程的方法实现高速信号处理算法。本文的目的在于如何利用DSP和FPGA各自的优势,设计出满意实时手势识别处理要求的硬件平台。  综述，本文提出的高速基于DSP+FPGA架构的手势识别系统的设计，它综合了FPGA和DSP的优点，通过DSP和FPGA在处理不同结构算法的优势，大大提高了手势识别的速度和精确?????率。  3应用前景  手势识别技术的应用范围很广泛，主要有以下几个方面：  1、用于虚拟环境的交互。如虚拟制造和虚拟装配、产品设计等。虚拟装配通过手的运动直接进行零件的装配,同时通过手势与语音的合成来敏捷的定义零件之间的装配关系。还可以将手势识别用于简单设计信息的输入;2、智能家居、多媒体设备的掌握。通过手势识别可以是使用者通过简洁的显而易见的手势对多媒体、家具设备实现掌握，如开关空调、多媒体展现等;  3、用于多通道、多媒体用户界面。正如鼠标没有取代键盘,手势输入也不能取代键盘、鼠标等传统交互设备，手势特别适合于教导、表达外形、几何变换和装配等任务。语音对于表达抽象概念及离散属性(或命令)是具有优势的,而且可以涉及视觉不及的对象。视线应用于人机交互在目标选择等方面具有直接性、自然性和双向性等特点。将手势输入和这些交互通道结合,将增加现有的人机交互模式,从而实现更为直接、自然、和谐的人机接口。这种多模式的人机交互技术已经成为当前讨论的热点,多通道人机界面将在可预见的将来占主导地位,并进一步促进虚拟现实技术的进展;  4、聋哑患者与正常人的沟通。手语是聋哑人使用，的语言,是由手型动作辅之以表情姿态由符号构成的比较稳定的表达系统,是一种靠动作/视觉交际的语言。手势识别可以让机器“看懂”聋人的手语。识别手语和手语合成相结合,构成一个“人-机手语翻译系统”便于聋人与四周环境的沟通;  4系统设计方案  通过摄像头采集手势图像，将图像数据存储到SDRAM中， FPGA处理系统通过对SDRAM的掌握，实现云台掌握和摄像头聚焦，且将图像数据根据所需时序从SDRAM中将数据读出，并进行锐化、与背景分别、消退噪声以及等预处理，再将预处理后的数据送到MicroBlaze处理器中，在MicroBlaze处理器中对手势图像进行简单的手势识别处理，完成手势分割、手势识别，并将识别出的手势