立体影像产生之有效破洞填补方法-NPUCSIE.PDF

第十一屆離島資訊技術與應用研討會 立體影像產生之有效破洞填補方法 An Efficient Hole-Filling Approach for Stereoscopic Image Generation 1 1 陳昭和 (Chao-Ho Chen) ,郭柏廷 (Bo-Ting Guo), 2 2 宋俊毅 (Chun-YiSung), 陳進興 (Chin-Hsing Chen) 國立高雄應用科技大學 電子工程系 1 國立成功大學 電腦與通信工程研究所 2 {thouho, 1099305148}@.tw chunyi@.tw chench@.tw 論文摘要 whole can enhance the effect of the image hole 本文係基於深度影像繪圖法(Depth Image filling. Based Rendering, DIBR) ，將單眼 攝影機拍攝的單 Keywords: Depth Image Based Rendering, motion 張影像進行 多視角虛擬影像之轉換 ，在傳統 DIBR estimation, Hole Filling Approach 的方法將深度圖進行影像平滑之前處理，以降低影 像破洞情況之發生，然而對深度影像進行前處理時 前言 會造成幾何扭曲和變形的缺點。本研究利用 DIBR 近年來，由於立體顯示技術的進步 ，人們渴望 破洞的特性開發出一套系統，將不進行深度影像前 體驗到比 2D影像更逼真的 3D視覺效果，因此與 處理，且利用移動向量估測法(motion estimation) 3D相關技術越來越受到大家的重視 。立體影像的 的概念以及深度資訊標記出前景與背景區域進行 產生可分為兩大類：一、由雙鏡頭拍攝而成的立體 判斷，搜尋適合的區塊進行填補。實驗結果顯示， 影像；二、由單鏡頭拍攝畫面進行影像處理，轉換 深度影像不進行前處理能保持良好的幾何紋理特 成多視角的虛擬影像。現今的雙鏡頭3D 攝影機價 性，採用移動向量估測法(motion estimation)搜尋可 格昂貴且雙鏡頭攝影機有效正及同步的問題，對於 以縮小搜尋範圍以減少運算時間，利用深度資訊判 攝影機內部參數調整也非常的麻煩。目前一般的使 斷前景及背景資訊則可以更精確的進行影像填補， 用者所擁有的還是以單鏡頭攝影機為主，如果能夠 整體而言都能提升影像破洞修補之效果。 用相關技術使 2D影像轉換成 3D影像，將可以解 關鍵詞： 深度影像繪圖法、移動向量估測法、破 決3D 攝影機昂貴以及操作不便的問題，也可以使 洞填補方法 3D影像更加普及。 大多數將2D影像轉換成 3D影像都採用 深度 Abstract 影像繪圖法 ，架構如圖1 。 In this study, we developed