基于骨骼信息下手势识别研究.PDFVIP

第３５卷第１２期　　　 计算机应用与软件 Ｖｏｌ３５Ｎｏ．１２ ２０１８年１２月　　 ＣｏｍｐｕｔｅｒＡｐｐｌｉｃａｔｉｏｎｓａｎｄＳｏｆｔｗａｒｅ Ｄｅｃ．２０１８ 基于骨骼信息下的手势识别研究 １ ２ ２ 杨和稳 　杨萍萍 　郭海晨 １（南京信息职业技术学院　江苏南京２１００００） ２（南京大学工程管理学院　江苏南京２１００００） 摘　要　　在人体行为动作中，基于手势动作的识别研究具有便捷、直观、互动性强、表达信息丰富等特点而成为 众多研究者对人体行为分析的首选。传统的动作识别一般是建立在二维彩色图像上进行研究，而二维ＲＧＢ图像 容易受到背景扰动、光线、环境等因素对人体目标检测的干扰。对微软Ｋｉｎｅｃｔ体感设备进行研究，利用Ｋｉｎｅｃｔ捕 获的深度图像，将其转换成骨骼图并提取骨骼关节点空间坐标信息，设计一个人体手势识别系统。借助动态时间 规整算法将测试模板与训练样本进行相似度的匹配计算，达到姿势识别的目的。在Ｕｎｉｔｙ３Ｄ里进行虚拟模型同 步演示，实现了对人体动作手势指令的识别和对模型的控制。 关键词　　姿势　识别　动态时间规整算法　Ｋｉｎｅｃｔ 中图分类号　ＴＰ３９１．９　　　　文献标识码　Ａ　　　　ＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．１０００３８６ｘ．２０１８．１２．０４２ ＧＥＳＴＵＲＥＲＥＣＯＧＮＩＴＩＯＮＢＡＳＥＤＯＮＳＫＥＬＥＴＯＮＩＮＦＯＲＭＡＴＩＯＮ １ ２ ２ ＹａｎｇＨｅｗｅｎ　ＹａｎｇＰｉｎｇｐｉｎｇ　ＧｕｏＨａｉｃｈｅｎ １（ＮａｎｊｉｎｇＶｏｃａｔｉｏｎａｌＣｏｌｌｅｇｅｏｆＩｎｆｏｒｍａｔｉｏｎＴｅｃｈｎｏｌｏｇｙ，Ｎａｎｊｉｎｇ２１００００，Ｊｉａｎｇｓｕ，Ｃｈｉｎａ） ２（ＳｃｈｏｏｌｏｆＭａｎａｇｅｍｅｎｔａｎｄＥｎｇｉｎｅｅｒｉｎｇ，ＮａｎｊｉｎｇＵｎｉｖｅｒｓｉｔｙ，Ｎａｎｊｉｎｇ２１００００，Ｊｉａｎｇｓｕ，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ　　Ｉｎｈｕｍａｎｂｅｈａｖｉｏｒ，ｔｈｅｒｅｃｏｇｎｉｔｉｏｎｒｅｓｅａｒｃｈｂａｓｅｄｏｎｇｅｓｔｕｒｅｈａｓｍａｎｙｃｈａｒａｃｔｅｒｉｓｔｉｃｓｓｕｃｈａｓ ｃｏｎｖｅｎｉｅｎｃｅ，ｉｎｔｕｉｔｉｏｎ，ｓｔｒｏｎｇｉｎｔｅｒａｃｔｉｏｎ，ａｎｄｒｉｃｈｅｘｐｒｅｓｓｉｏｎｉｎｆｏｒｍａｔｉｏｎ，ｓｏｉｔｈａｓｂｅｃｏｍｅｔｈｅｆｉｒｓｔｃｈｏｉｃｅｆｏｒｍａｎｙ ｒｅｓｅａｒｃｈｅｒｓｔｏａｎａｌｙｚｅｈｕｍａｎｂｅｈａｖｉｏｒ．Ｔｒａｄｉｔｉｏｎａｌｍｏｔｉｏｎｒｅｃｏｇｎｉｔｉｏｎｉｓｇｅｎｅｒａｌｌｙｂａｓｅｄｏｎｔｗｏｄｉｍｅｎｓｉｏｎａｌｃｏｌｏｒｉｍａｇｅ， ａｎｄｔｗｏｄｉｍｅｎｓｉｏｎａｌＲＧＢｉｍａｇｅｓａｒｅｅａｓｉｌｙｉｎｔｅｒｆｅｒｅｄｂｙｂａｃｋｇｒｏｕｎｄｄｉｓｔｕｒｂａｎｃｅ，ｌｉｇｈｔ，ｅｎｖｉｒｏｎｍｅｎｔａｎｄｏｔｈｅｒｆａｃｔｏｒｓ ｗｈｅｎｈｕｍａｎａｒｅｄｅｔｅｃｔｅｄ．Ｉｎｔｈｅｐａｐｅｒ，ｗｅｓｔｕｄｉｅｄＭｉｃｒｏｓｏｆｔＫｉｎｅｃｔｓｏｍａｔｏｓｅｎｓｏｒｙｄｅｖｉｃｅｗｈｉｃｈｗａｓｕｓｅｄｔｏｃａｐｔｕｒｅ ｄｅｐｔｈｉｍａｇｅ，ｃｏｎｖｅｒｔｅｄｔｈｅｄｅｐｔｈｉｍａｇｅｉｎｔｏｂｏｎｅｉｍａｇｅｔｏｇｅｔｓｐａｔｉａｌｃｏｏｒｄｉｎａｔｅｉｎｆｏｒｍａｔｉｏｎｏｆｂｏｎｅｊｏｉｎｔｐｏｉｎｔ，ａｎｄ ｄｅｓｉｇｎｅｄｔｈｅｈｕｍａｎｂｏｄｙｇｅｓｔｕｒｅｒｅｃｏｇｎｉｔｉｏｎｓｙｓｔｅｍ．Ｔｈｅｄｙｎａｍｉｃｔｉｍｅｗａｒｐｉｎｇａｌｇｏｒｉｔｈｍｗａｓｕｓｅｄｔｏｃａｌｃｕｌａｔｅｔｈｅ ｓｉｍｉｌａｒｉｔｙｂｅｔｗｅｅｎｔｈｅｔｅｓｔｓａｍｐｌｅｓｗｉｔｈｔｈｅｔｒａｉｎｉｎｇｓａｍｐｌｅｓ，ｓｏａｓｔｏａｃｈｉｅｖｅｔｈｅｐｕｒｐｏｓｅｏｆｇｅｓｔｕｒｅｒｅｃｏｇｎｉｔｉｏｎ．Ｔｈｅ ｖｉｒｔｕａｌｍｏｄｅ