基于CTU纬度的360度视频快速编码.docx

基于CTU纬度的360度视频快速编码 Abstract： In view of the stretching phenomenon when the 360 video is projected in equi-rectangular projection format， and the characteristics that the sampling rate of two-pole is high but the equator is relatively low， the paper proposes a fast encoding algorithm of 360 video based on the CTU latitude position. First， because of the ERP video non-uniform sampling rate， the entire ERP image can be divided into three parts： the area near the pole， the area near the equator， the area between the pole area and the equatorial area. Secondly， based on the latitude position of the coding tree unit， the area to which the current coding tree unit belongs is determined， that is， the area division is finally determined according to the coding tree unit latitude. Finally， according to the criteria that for different regions， the locations with high sampling rate are suitable for large block coding， and the locations with low sampling rate are suitable for small block coding， the area prediction depth range is determined. Experimental results show that when using WS-PSNR to evaluate the coding effect， compared with the HEVC reference software HM integrated with 360Lib3.0， the algorithm saves 11.9% of the coding time when the luminance block has a BD-rate increase of only 0.6%. 引言 近年着计算机三维处理能力的增长和低成本传感显示元件的出现，虚拟现实得到了快速发展[1]。360度视频作为虚拟现实内容具体呈现形式之一，是采用相机阵列拍摄自然场景或者说由多个镜头同时对物体进行360度环绕拍摄得到的视频，可以同时获取水平方向360度和垂直方向180度的场景图像。由于其包括全部物理视域的像素点，一般采用4 K、6 K或者8 K的视频分辨率，及10 bit的位深。高分辨率和位深给360度视频编码及传输带来了巨大的挑战。由ITU-T/VCEG和ISO-IEC/MPEG成立的联合视频研究组（JVET）把360度视频纳入到未来视频编码标准范围内，并开发了用于360度视频编码和处理的360Lib软件包 [2]。 本文中，研究针对编码单元树的划分深度，利用360度视频基于ERP格式投影时越靠近极点区域采样越密集、越靠近赤道区域采样越稀疏的不均匀采样特性，通过缩小编码单元树的划分深度范围，在编码性能损失可以接受的情况下，尽可能减少360度视频的编码时间，提升编码效率。 1相关工作 针对360度视频的编码问题，主要分为2类。一是通过改进360度视频的投影格式来提升编码性能；二是将类似于传统视频，在编码阶段针对360度视频的特性进行HEVC局部编码优化。Lee等人[3]通过在不连续的边缘处填充额外的像素点的方法来改进COHP（紧密八面体投影），紧密八面体投影存在4个不连续的边缘，该方法认为于编码之前，在每个不连续边缘处填充由垂直线性插值得到的2个有效像素点，这样有效减少了在不连续边缘周围出现的伪影，并提升了压缩效率。Boyce [4]提出了一种填充的ERP投影格式PE