基于Hough变换和神经网络的中国静态手语识别-计算机应用技术专业论文.docxVIP

1.1.3中国手语分类 从不同的角度可以对手势进行不同的分类。大致分为 (1)交互性手势与操作性手势 前者手的运动表示特定的信息(如乐队指 挥)，靠视觉来感知;后者不表达任何信息(如弹琴)。 (2)自主性手势和非自主性手势后者与语音配合用来加强或补充某些信息 (如演讲者用手势描述动作、空间结构等信息)。 (3)离心手势和向心手势前者直接针对说话人，有明确的交流意图，后者 只是反映说话人的情绪和内心的愿望。 1.1.4 中国手语特征 在中国手语的发话过程中，发话者的信息分别由身体动作(例如鞠躬)、手 指字母与手部动作(单手、双手)的配合、手部与身体某一部位的配合(与身体 的配合或与面部表情的配合)给出。按其发话的动作来分，中国手语的词汇可以 被分为以下几种类型。 (1)手指语 手指语给出所有的汉语拼音字母以及数字 ，并与其它动作配合给出相应的词 汇。一些手语词汇由手指语单独给出，如剪子、还给 、否定、成功等，而 另一些词汇则字母连打组成，如支部、行政。 (2) 单手手语词汇 单手手语词汇由一只手与身体的某 一部位，如肩、嘴唇、耳朵 、前额等配合 给出。 (3)双手孚语词汇 在双手手语词汇的发话过程中 ，一只手为主导手(通常是右手)，而另外一只 手则为从手。与主手相比，从手的动作比较简单，而且常常与主手动作对称。在 双手手语中 ，约有 6%的手语为静态的，即在手语发话过程中起始手形和终止孚形 相同，而且手在空间的位置也没有发生变化(如门、房子，，)等。大部分手语词 汇的发话过程为动态的。在手语的发话过程中孚的运动轨迹由直线(如平(平 等) )，圆弧(如搬)，也有比较复杂的之字型， (如芭蕾舞)，因此其识别 也比较困难。 (4) 其它 在中国手语中还存在 一些以身体本身的动作形成的词汇(例如鞠躬)和一些 只需要身体与孚臂的配合而形成的词汇(如舞蹈)。 手势的各种组合、运动相当复杂， 不过简单来看，手势主要有如下的特点:手是弹 性物体，因此同一手势之间差别很大，手有大量冗余信息，由于人识别手势关键是识 别手指特征，因此手掌特征是冗余的信息:手的位置是在三维空间，很难定位:手的表 面是，非平滑的，容易产生阴影。 了解了手势的这些特点，就可以在手势研究中对手势做适当的分割、假设和约 束。例如，可以给出如下约束: (1) 如果整个手处于运动状态.那么手指的运动和状态就不重要; (2) 如果手势主要 囱各手指之间的相对运动构成，那么手就应该处于静止状 态。 1.2 手语识别研究的必要性及国内外现状 1.2.l手语识别研究的必要性 以手势表现人的意图是一个非常自然的方式，人类在数千年的发展中已经形成 了大量的、通用的手势。一个简单的手势蕴涵着丰富的信息，人与人可以通过手势 传达大量的信息。除了人们日常生活中的一些通用手势外，对于特定领域还有 一批 相关手势，包含不同领域的相关信息。比如聋哑人使用的手语就是 一种系统化的特 殊手势，它是由手形动作辅之以表情姿势而构成的比较稳定的表达系统，是一种靠 动作/视觉进行交际的特殊语言。 在用常见的手势进行交流时，人们很容易就能互相理解，在经过学习之后，聋哑 人或是正常人都可以运用手语进行交流。 然而人类之间的交流往往声情并茂，既采用自然语 言(口语、书面语言)，还广泛 采用人体语 言(表情、体势、手势)。与人类之间的交流相比，人机交互就显得呆板多 了。以计算机的输入方式为例，人要向计算机下达指令，最常见 的方式还是通过键盘 输入。当然，孚写输入也 正为许多人所接受和喜爱，语音输入的研究也进行得热火朝 天，最初单 一而呆板的输入方式已经得到了扩展。然而，科学研究是永无止境的，人体 语言这种简单快捷的信息交流方式也得到了很多研究者的关注，于是研究人员展 开了对人体语言理解的研究 。人体语言的感知、人体语 言与自然语言的信息融合 对提高计算机的人类语言理解水平 语(手势)是人体语 言的一个非常重要的组成部分，它是包含 信息量最多的一种人 体 语言，它与语言、书面语等自然语言的表达能力相同。因而完全可以把手语作为人 机交互的一种手段，它具有很强的视觉效果，生动、形象、直观。可见，将 孚势运用于 计算机能够很好地改善人机交 互的效率。 1.2.2 手语识别的国内外研究现状 计算机识别手势的手段主要有两种: l数据手套。数据手套是虚拟现实系统中广泛使用的传感设备，用户通过数据 手套，能做出各种手势向系统发出命令，与虚拟世界进行各种交互操作:比如通过 一 只与数据手套对应的在计算机屏幕上显示的虚拟手，使用户成为虚拟世界中的一员 抓取物体，如果手套有力反馈，还能让用户感觉到物体的重量和材质等。美国在洞 穴虚拟系统中就是利用数据手套来研制武器。数据手套的主要优点是可以测定手 指的姿势和手势，