人机互动介面之即时手势识别技术-npucsie.pdfVIP

第九屆離島資訊技術與應用研討會論文集 人機互動介面之即時手勢識別技術 鄧有光 陳永輝 劉毅人 聖約翰科技大學資訊工程學系 龍華科技大學資訊網路工程系 淡江大學資訊工程學系 lawrence@.tw cyh@.tw f08572@ 摘要 些整理與探討，並將與此研究有關的知識背景及姿 勢識別系統﹝Gesture Recognition Systems ﹞的建立 本論文的目的在於發展出一套人機互動介面之即 方法提出說明。 時手勢識別技術。這套系統著重於手勢辨識，讓使 在本研究中，我們所提出的系統需要一個單一 用者可以不經由直接碰觸，而藉由身體姿態與電腦 的攝影機，用來擷取使用者手的動作，並且識別一 應用程式進行互動。研究方法採用 Shape Context 組預先定義好的手勢。在我們的方法論當中，一開 Matching作為手勢影像比對的基礎，首先利用視訊 始會先清除所擷取影像的背景、刪除不洽當的像素 設備擷取手勢影像，然後利用電腦視覺的相關技術 資訊。繼而影像當中『手』的部份將會被檢測並分 從影像當中分析出重要的形狀資訊，接著將這些資 割出來，它的輪廓特徵也會被描述下來。我們便可 訊轉換成適當的指令之後，交由應用程式去執行該 以從這些輪廓特徵當中，分析出重要的指標 動作。 ﹝Metrics ﹞資訊。然後我們可以利用這些資訊，在 關鍵詞 ：人機互動、姿勢識別、Shape Context。 系統裡預先定義的手勢庫中搜尋，以便將使用者的 手姿勢轉換為對應的指令格式，觸發動作。 實作此系統，主要相關技術包括：清除背景 1.緒論 ﹝Background Subtraction ﹞、色彩追蹤﹝Color Tracking ﹞、手輪廓擷取﹝Hand Extraction ﹞、手姿 因應目前的科技發達，鍵盤跟滑鼠已經不再是 勢識別﹝Hand Gesture Recognition ﹞。 控制電腦的單一必需品了，許多用於取代鍵盤與滑 ﹝一﹞清除背景﹝Background Subtraction ﹞ 鼠的人機互動介面﹝例如語音辨識、姿勢識別﹞都 要達到清除背景的目的，可以先建立一個參考 在積極的被研究開發當中。在這篇論文當中，我們 影 像 ﹝ Reference image ﹞ ， 當 作 背 景 模 組 以「虛擬寵物遊戲」為例，試圖呈現出比以往更多 ﹝Background model ﹞[1] ，描述背景的構成。背景 的遊戲互動方式與風格，像是藉由視訊感測的特 模組會給定每個像素值變化量的上限與下限，當有 點，可以讓遊戲更加的真實化，並製造出人機直接 像素值變化量超過限制，則視為前景。但有些背景 溝通的方式不需依靠類似滑鼠、鍵盤等介面。