以梯度方向直方图为基础之多样式手势分类辨识-NPUCSIE.PDF

第十二屆離島資訊技術與應用研討會論文集 以梯度方向直方圖為基礎之多樣式手勢分類辨識 * 陳定宏 張財榮 林福城 南台科技大學資訊工程系 {chendh*, trchang, m99g0222}@.tw 摘要 強大的整合且用於辨識手勢及其更類似人類的界 以視覺處理技術來進行手勢辨識是一個熱門 面，比如說鍵盤、滑鼠、搖桿，這些共通的裝置。 的研究課題。手勢辨識主要分為靜態手勢和動態手 本論文針對台灣手語之多樣性的手勢，做靜態 勢辨識。靜態手勢辨識主要著重於手勢外形的偵測， 的手勢辨識。在台灣手語表中，有多達 51 類的手 而動態手勢辨識則結合靜態手勢位置的檢出及追 勢下，精確的辨識所有的手勢，有相對難度。本研 蹤其移動所造成之軌跡的動作辨識。 本論文針對多 究保留較常用的手勢，以及去除相似度高的手勢及 樣本的手勢分類辨識 ，以梯度方向直方圖 (HOG, 非手勢部份之後，剩餘結果為38種的手勢，在此 histogram of oriented gradients)的特徵 ，並加入深度 階段時，目的為將 38種的靜態手勢，皆能精確的 資訊 來擷取手部外形。由於取出的特徵維度較高， 辨識成功。 因此我們以主成份分析法 (principal component analysis ，PCA) 來降低資料維度。我們採用最鄰近 背景與文獻探討 點搜尋法 (nearest neighbor search) ，來找出與輸入影 手勢的相關研究中可分為二大類圖( 1) ，第一 像最相近的樣本圖像，輸出其所屬手勢類別，達到 類是使用穿戴式配備 為基礎之方式，藉由輔助的硬 手勢辨識的目的。 體裝置的電子訊號 ，來定位與記錄手勢，其中又可 分感應式裝置與發射式裝置。第二類是利用視覺偵 關鍵詞 ：手勢追蹤、手勢辨識、梯度方向直方圖 、 測與影像處理方法，來達到 手勢追蹤及辨識之效果。 最鄰近點搜尋法 以視覺為基礎之手勢研究又可區分為三小類，分別 是利用單一相機、立體相機、多視點相機 等設備為 Abstract 方法之手勢辨識。[1-12] Gesture recognition is an attractive research 在以視覺處理方式為方法的手勢辨識中，可分 topic for computer vision applications. There are two 為靜態手勢辨識與動態手勢辨識。靜態手勢辨識， major categories for gesture recognition, i.e. static 指由單一張影像來辨識所描述之固定手型之手勢。 gesture recognition and dynamic gesture recognition. 動態手勢，為追蹤多張影像之手勢位置後，辨識其 The static gesture recognition handles the task for