东海大学资讯工程和科学系.doc

東海大學資訊工程與科學系 畢業專題成果競賽 數位家庭結合影像辨識系統 專 題 實 驗 報 告 書 指導老師:朱正忠教授 參賽組員:陳碩懋、黃宇正、陳亮融 中華民國 九十七 年 十二 月 二十 日 目錄 一、摘要 3 二、前言與文獻回顧 4 三、設計原理分析 5 系統架構 5 主要CLASS介紹 6 系統流程 8 色彩系統 9 RGB 11 CMYK : 13 YUV 13 YIQ: 13 YcbCr： 13 HSV： 15 RGB 轉HSV 訊號轉換 15 從三原色光模式變換 16 雜訊去除 17 增長(Dilation)： 17 侵蝕(Erosion)： 17 開運算(Opening)： 18 閉運算(Closing)： 19 空間濾波： 19 低通濾波(lowpass filter)︰ 20 中值濾波(median filter)︰ 20 高通濾波(highpass filter)︰ 20 四、軟硬體系統說明 21 個人電腦： 22 網路攝影機： 22 五、團隊分工合作方式 23 六、成果與討論 24 七、結論 26 一、摘要 我們這一組一開始的專題題目大方向是以數位家庭為主要目標，而數位家庭顧名思義就是家電產品數位化以及透過像是電腦這種能整合控制的工具將家庭中所有數位化電子產品整合的概念。 然而我們專題決定是在聽了朱老師安排的一場廠商介紹他們數位家庭產品之後才有靈感，那天來的廠商是介紹以電腦控制房間的所有電燈，我們聽完後就決定做影像處理控制房間的電器用品。 我們專題主要是運用到一台攝影機與電腦，將攝影機擷取到的圖經過影像的辨識處理，例如增長、侵蝕、開運算、閉運算演算法去處理訊號，之後再放到我們的虛擬控制面板去控制模擬環境的開燈關燈與開音樂。 我們目標是想讓人們在不需要起身，只要隔空就能控制面板上的功能進而控制家庭內的家電用品。 二、前言與文獻回顧 近幾年來，已經有越來越多人在廣泛的使用電腦，將電腦應用在日常生活中，並且越來越重視電腦所帶來的生活習慣改變，電腦可以有電視的功能，也有了音響的功能，也能網路開視訊會議。因而產生了許多的電腦周邊配備，如：視訊攝影機及麥克風等等，已達到我們的需要的功能。 倘若我們能利用一個簡單的網路攝影機，結合電腦的程式介面，使得整合了電器開關，以電腦能控制多項家電，已達到數位家庭的方便性，這是我們樂於見到的。 在現今家庭中，不時會有一些數位功能的配備，例如指紋辨識，聲控辨識開關燈，這些數位功能結合的用品，越來越趨於智慧型家庭電器。如：數位影像處理辨識開關燈，使用起來不但簡單，更增加了生活的方便性，程式介面中只有簡單幾個功能，使用容易懂，但這些使用場所，總是充斥著各式各樣的東西，辨識正確的品質也有待加強。倘若我們能把家中所有電器用品都數位化整合，就可以讓生活過得更方便。 因此，我們針對以上需求，在本專題中，希望利用一台視訊攝影機及電腦影像處理技術，結合大家所熟知的數位家庭的概念，設計一個能辨識影像即可打開模擬環境的電燈和音樂，但要轉到實際的電燈和音響上可能是本專題還要改進加強的地方。 在本專題中，最重要的部分，是在於影像處理上的手勢辨識，而手勢辨識，已經有相當多的文獻探討這方面的相關研究。隨著時代的進步，不少人對這方面專心致力於手勢辨識的研究上，大多都是在醫學方面上的成就，如手語辨識及看護系統等等，這些皆需要手勢辨識方面的基礎，為的就是希望能夠帶給大家更安逸、方便的生活。 而從以前到現在手勢辨識的研究，比較有代表性的略述如下： 硬體方面：大多以裝有感測器的手套來達到辨識的功能，由於需要其他硬體設備上的支援，故在此我們不考慮使用此種方式； 軟體方面：大多是利用影像處理技術來達到辨識的功能，主要是針對從影像中分割出手的區域。 在眾多文獻中，我們可以發現到有幾種方法：有人使用多部攝影機來做3D 的手部辨識，但複雜且增加成本上的花費。而若是以2D 來做手部辨識，則有下列幾種：是找出手的二值化影像後，取出手的輪廓，利用輪廓的曲率來做為特徵，以判定手勢。手勢靜態時，做基本的辨識功能；手勢動態時，則配合追蹤功能，做手語辨識。利用機率抓出手部，再採用形態學的方法：侵蝕、膨脹，清除雜訊，取得手部的輪廓後。 而在本論文中，我們最主要是以2D 來做指定顏色物品辨識。 三、設計原理分析 系統架構: 大致上以下的流程圖是我們這次專題的主要流程: 圖：影像分析流程 這是程式影像擷取流程，說明影像經由何種方式輸入及傳送影像至電腦中做運算分析。其中以網路攝影機(webcam)為系統的輸入裝置，擷取系統所需的影像資訊，透過USB 介面傳輸至個人電腦中，其影像格式：RGB色彩空間的320×240 影像。 圖：簡單物件示意圖 圖：影像擷取流程