应用深度资讯的画面频率提升演算法.PDF

第十一屆離島資訊技術與應用研討會 應用深度資訊的畫面頻率提升演算法 1 2 3 4 戴顯權 王春清 洪健翔 葉姿霈 國立成功大學電通所 1sctai@.tw 3hcs93m@ 4ycp99m@.tw 2 高苑科技大學資科系 wsc3829@ 論文摘要 預估出基於物件的動作向量 ，將會呈現在以下的內 在這篇論文，我們提出了一個改良的擬真動 容中。 作預估來提升畫面更新率 。在提出的動作預估演算 法中，藉由深度資訊來分別的不同物件，並各自從 相鄰區塊的動作向量挑選候選 因此可以得到以像。 背景 素為單位且較為準確的動作向量。對於重疊的區域， A. 動作補償畫面內插的概述 也可用深度資訊來決定選取哪一個動作向量的候 在動作補償畫面內插中，被略過的畫面是以動 選。實驗結果顯示出就算在較為複雜的影片，我們 所提出的演算法在客觀及主觀上可以提升內插畫 作向量資訊來做內插。如圖 1所述，假設在極短的 面的畫面品質。 時間內，物件都是以線性來移動。對於每一個在現 在畫面 f 的區塊，其在內插畫面的相對區塊都是 關鍵詞 : 動作估計、 動作補償畫面內插、畫面 n 藉由動作向量的一半來加以定位，而且其會以 頻率提升 MV/2 對到前一張畫面f n-1和以 -MV/2 對到現在畫 面 f n 。 前言 由於現今有各式的多媒體設備，影片也會有各 種不同的壓縮格式以及畫面解析度 。對於有較少的 頻寬和較弱的計算能力的行動裝置而言 ，低畫面頻 率的影片就會較適合。畫面頻率提升演算法可以用 來強化從較低資訊量的影片重建後的品質。 在先前的話畫面頻率提升演算法中，像是畫面 重複 [1]以及線性畫面內插[2] ，並沒有使用到動作 圖 1. 動作補償畫面內插 向量。但當畫面有較為複雜或較大的動作時，前述 的方法可能就沒有辦法達到很好的效果。因此，動 作補償就成為另外一種方法來內插出中間畫面 ，進 根據雙向內插法 (bidirectional interpolation) ，每 而達到提升畫面頻率。一般而言，動作估計是會影 一個像素值都可以藉由萃取得到的動作向量得到 響內插畫面的最重要的部分。在 [3]使用了動作向 其在前一張