手形特征与运动轨迹相结合的动态手势识别.docVIP

Ｙ９７３４７５ 学校代码：１０２５４ 密级： 论文编号： 上治廖教学 ＳＨＡＮＧＨＡＩＭＡＲＩＴＩＭＥＵＮＩＶＥＲＳＩＴＹ 硕士掌位论文 ＭＡＳＴＥＲＤＩＳＳＥＲＴＡＴＩＯＮ 手形特征与运动轨迹 论文题目：担箜金煎盘查壬夔迟型 学科专业：盐越旦垫盎 作者姓名：望竖垫 指导教师：至盎盘耋咝 完成日期：三ＱＱ五生六月 摘要 人与计算机的交互活动越来越成为人们日常活动的一个重要组成部分。而由于手 势本身具有的多样性、多义性，以及时『ＢＪ和空间上的差异性等特点，加之人手是复杂 的变形体以及视觉本身的不适定性，使此方向研究成为一个极富挑战性的多学科交叉 研究课题。 本文结合上海市自然科学基金资助课题。手势识别与合成”，从手势图像的预处 理、手势的特征提取和手势的分类器设计等三方面研究了基于视觉的动态手势识别的 识别算法。 在图像预处理阶段，我们先对手势图像进行无冗余的帧分离操作，将我们感兴趣 的手势图像从视频流中分离出来，接下来我们进行灰度化处理和平滑去噪，平滑后我 们用自适应阈值法对手势图像进行二值化，得到了较好的二值化效果。 在特征提取环节，我们先提取手形特征并依据手形特征进了粗分类，然后提取手 势图像的运动轨迹特征与手势的手形特征相结合产生了手势的特征向量。 在分类器的设计上，我们将１４套手势图像这样划分：４套为训练集１０套为测试 集。然后先根据手势训练集学习手势特征，再计算测试集中手势与训练集中手势的欧 氏距离，最后用近邻法来识别判断。 实验的结果证明了我们的方法是完全行之有效的，识别率达到了９３．３％。关键词：动态手势识别，图像预处理，白适应阈值，近邻法 Ｈａｎｄｇｅｓｔｕｒｅｓｐｌａｙａｎａｔｕｒａｌａｎｄｉｎｔｕｉｔｉｖｅｃｏｍｍｕｎｉｃａｔｉｏｎｍｏｄｅｆｏｒａｌｌ ｈｕｍａｎｄｉａｌｏｇｓ．Ｔｈｅａｂｉｌｉｔｙｆｏｒｃｏｍｐｕｔｅｒｔｏｖｉｓｕａｌｌｙｒｅｃｏｇｎｉｚｅｈａｎｄｇｅｓｔｕｒｅｓｉｓ ｅｓｓｅｎｔｉａｌｆｏｒｆｕｔｕｒｅｈｕｍａｎ?ｃｏｍｐｕｔｅｒｉｎｔｅｒａｃｔｉｏｎ．Ｈｏｗｅｖｅｒ．ｖｉｓｉｏｎ—ｂａｓｅｄｒｅｃｏｇｎｉｔｉｏｎ ｏｆｈａｎｄｇｅｓｔｕｒｅｓｒｅａｓｏｎｓｉｓａｎｅｘｔｒｅｍｅｌｙｃｈａｌｌｅｎｇｉｎｇｉｎｔｅｒｄｉｓｃｉｐｌｉｎａｒｙｐｒｏｊｅｃｔｆｏｒ ｔｈｅｆｏｌｌｏｗｉｎｇｈａｎｄｇｅｓｔｕｒｅｓａｒｅｄｃｈｉｎｄｉｖｅｒｓｉｔｉｅｓ．ｍｕ似－ｍｅａｎｉｎｇｓａｎｄｓｐａｃｅ－ｔｉｍｅ ｖａｄｅＵｅｓ；ｈｕｍａｎｈａｎｄｓａｒｅｃｏｍｐｌｅｘｎｏｎ—ｄｇｉｄ ｉｌｌ—ｐｏｓｅｄｐｒｏｂｌｅｍ． Ｔｈｉｓｐａｐｅｒｄｉｓｃｕｓｓｅｄｔｈｅｒｅｓｅａｒｃｈｏｆｖｉｓｉｏｎ?ｂａｓｅｄＤｙｎａｍｉｃＧｅｓｔｕｒｅｏｂｊｅｃｔｓ；ｃｏｍｐｕｔｅｒｖｉｓｉｏｎｉｔｓｅｆｆｉｓａｎ Ｒｅｃｏｇｎｉｔｉｏｎｂａｓｅｄｉｎ３ａｓｐｅｃｔｓ：ｇｅｓｔｕｒｅｉｍａｇｅｐｒｅｐｒｏｃｅｓｓｉｎｇ，ｆｅａｔｕｒｅｅｘｔｒａｃｔｉｏｎ ａｎｄｔｈｅｄｅｓｉｇｎｏｆｃｌａｓｓｉｆｉｅｒ． Ｉｎｔｈｅｐｒｏｃｅｓｓｏｆｉｍａｇｅｐｒｅｐｒｏｃｅｓｓｉｎｇｗｅｅｘｔｒａｃｔｔｈｅｆｒａｍｅｓｔｈａｔｗｅａｒｅ ｉｎｔｅｒｅｓｔｅｄｉｎｆｒｏｍｔｈｅｖｉｄｅｏｆｉｌｅｆｉｒｓｔ．ｔｈｅｎｔｈｅｒｅａｒｅｓｅｖｅｒａｌｉｍａｇｅｏｐｅｒａｔｉｏｎｓｗｅ ｓｈｏｕｌｄｄｏ．ＷｅｔｕｍｔｈｅＲＧＢｃｏｌｏｒｉｍａｇｅｓｉｎｔｏｇｒａｙ－ｓｃａｌｅｄｉｍａｇｅｓ，ｔａｋｅｔｈｅ ｓｍｏｏｔｈｉｎｇｍｅａｓｕｒｅｔｏｒｅｄｕｃｅｔｈｅｎｏｉｓｅｉｎｔｈｅｉｍａｇｅｓ，ｔｈｅｎｗｅｇｅｔｔｈｅｂｉｎａｒｙ ｖｅｒｓｉｏｎｏｆｔｈｅｉｍａｇｅｓｂｙｔｈｅｍｅａｎｓｏｆａｄａｐｔｉｖｅｓｈｒｉｎｋａｇｅｖａｌｕｅ． Ｆｏｌｌｏｗｉｎｇｔｈｅｉｍａｇｅｐｒｅｐｒｏｃｅｓｓｉｎｇ，ｉｔ＇ｓｔｕｒｎｔｏｅｘｔｒａｃｔｔｈｅｄｇｈｔｆｅａｔｕｒｅ ｆｒｏｍｔｈｅｇｅｓｔｕｒｅ．Ｗｅｇｒｏｓｓｌｙｃｌａｓｓｉｆｉｅｄｔｈｅｇｅｓｔｕｒｅａｃｃｏｒｄｉｎｇｔｏｔｈｅｔｒａｃｋｏｆｔｈｅ ｈａｎｄａｎｄｔｈｅｓｈａｐｅｏｆｔｈｅｈａｎｄ．ａｎｄｔｈｅｎｗｅ Ｉｎｔｈｅｃａｌｃｕｌａｔｅｔｈｅｖａｌｕｅｏｆ仇ｅｆｅａｔｕｒｅ．ｃｌａｓｓｉｆｉｅｒｄｅｓｉｇｎｉｎｇ，ｗｅｓｐｌｉｔｔｈｅ１４ｓｅｔｓｏｆｇｅｓｔｕｒｅｉｍａｇｅｓｉｎｔｏ１０ ｔｅｓｔｉｎｇｓｅｔｓａｎｄ４ｄｅｓｉｇｎｉｎｇｓｅｔｓ．Ｔｈｅｓｙｓｔｅｍｇｅｔｓｔｈｅｆｅａｔｕｒｅｆｒｏｍｔｈｅｄｅｓｉｇｎｉｎｇ ｓｅｔｓａｎｄｓａｖｅｉｔａｓａｔｅｍｐｌａｔｅ，ａｎｄｔｈｅｎｉｔｃａｌｃｕｌａｔｅｓｔｈｅｆｅａｔｕｒｅｏｆｔｈｅｉｎｐｕｔ ｇｅｓｔｕｒｅｏｆｔｈｅｔｅｓｔｉｎｇｓ