基於三角形转换映射的任意视点合成演算法-国立交通大学机构典藏.PDF

  基於三角形轉換映射的任意視點合成演 算法 研究生：李兆軒 指導教授：杭學鳴 博士 國立交通大學 電子工程學系 電子研究所碩士班 摘要 立體影像視覺顯影技術在多媒體通訊應用領域已經成為了非常熱門的研究 主題，其中又以任意視點合成技術為最主要的關鍵議題。在近年來，有許多任意 視點合成演算法已經被提出，通常都是利用多重影像以及其對應的深度資訊圖來 產生虛擬視點的影像以達到任意視點的效果。 在本篇論文中，我們利用計算特徵對應點架構達到較佳的三角化歪斜映射後 的結果。以及為了減少不自然的視覺感受，我們同時也利用多重頻段調合技術達 到較好的影像品質。在計算特徵對應點架構中，我們計算影像亮度資訊以及相對 應深度資訊圖上的梯度相關性來判定是否為特徵點。然而，三角化歪斜應射後的 結果往往會在合成影像的物體邊緣處產生人造的不自然現象。因此，我們利用中 i      值濾波器以及多重頻段調合技術的概念以達到較佳的主觀視覺品質。當我們合成 影像的過程中，多重頻段調合技術幫助我們對於物體邊緣處有柔和化的效果。 我們首先利用影像紋理針對前景深的部份映射至目標影像，我們稱之為 TBTW 演算法。比起傳統的畫素對畫素映射演算法， TBTW 演算法的優點在於 可耗費較少的運算資源。然而，合成影像往往特別對於物體邊緣處都會產生瑕疵 現象。因此我們採用相似的流程僅對於景深圖使用三角映射的方式，我們稱之為 TBDMW演算法。對於紋理合成的部份我們仍然使用傳統的畫素對畫素映射方式。 在本文獻的最後，我們也會針對我們提出的演算法顯示 MPEG測試影像的合成 結果，實驗結果顯示我們的演算法達到與 MPEG所提供的 VSRS 類似的效果。 ii      A Triangular-warping Based View Synthesis Algorithm for FTV Student: Chao-Hsuan Li Advisor: Dr. Hsueh-Ming Hang Department of Electrical Engineering Institute of Electronics National Chiao Tung University Abstract The free viewpoint video technology or free-viewpoint television (FTV) is an emerging research topic in multimedia processing. View synthesis is one key enabling technique of FTV. Several view synthesis schemes have been proposed in the past a few years. Typically, it uses multiple image views and depth maps to generate the intermediate view at nearly any arbitrary viewpoint. In this study, we adopt the triangular warping technique for either