基于MPEG2的3DTV视频编码方案的研究.pdfVIP

数宇电视与数宇视频广播 张勇东，李桂苓 1引言 迄今为止，电视技术经历了从黑白到彩色，现正在向赢清晰度电视(HDTV)发展。立体电视(3DTV)则 是电视技术未来的发展方向。3DTV增加了景物深度信息，增强丁视觉的现实感和逼真感。3DTV技术在科 研、军事、教育、丁业等诸多领域都有厂泛应用前景．目前倍受世界各国科技界关注的虚拟现实(vR)技术也 同3DTV技术有紧密联系，世界范围研究3DTV技术的热潮正在兴起。 3DTV的实用化有许多问题需要解决，其中一个主要问题是如何实现3DTV视频信号的高效传输和存 储。3DTV视频信号包括左右两个通道，两倍于普通2DTV视频数据，如果不进行更高比率的压缩编码， 31YIV税频信号的有效传输是不可能的。由于3DTV两通道的图像序列问有很强的相关性，而对人的视觉 系统(HVS)的研究得知，对两个通道的图像进行不同质量的编码，不会引起明显的视觉损伤，这就为对 3DTV视频进行更高比率的压缩编码提供了理论可行性： 的3DTV视频信号也采用基于MPEG一2的压缩编码技术= 23DTV视频摄取系统和视差估值过程 3DTV视频摄取系统由左右两个位置略有差别的相机构成，主要有两种类型：平行相机系统(光轴平 行)和汇聚相机系统(光轴相交)。它们的几何结构如图1所示： 空间景物在左右成像平面上形成的两个图像^和矗，称之为立体图像对。给定^中的一点尸L(钆帅)， 在矗中搜索与之相对应的点PR(¨，x一)的过程称为视差估值过程，即搜索视差向量的过程。设点PL到点PR 视差向量为 d(dh，t)=尸0。廿j)一只n，—仉) { ％■ Ⅱ● ＼ k j．宴_l r、、L_、 ＼．叫 一≤ jj登j 、。 ≮娄、 、萋：嬲 (a)半彳亍相机系统 (b)汇聚相机系统 图1相机系统的几何结构 51 数字化趋势 则其水、I’和垂直分量分别为 dh=。R一。L。d，=YR—h 由于3DTV视频摄取系统一般采用平行相机系统．因此，下面仪以平{亍相机系统为例推导视差向量d的计算公式。如 图l所示，卒问‘点P(f．，，=)分别投影到左右戚像平碰上，对应的点分别为R(也，y。)．咋(x。，帅)。Fh于平行相机系统没有 堆直视差，园此yL=h．而水平视差dn_堍』。。由i角关系．可得 ‰=壬(x+粤)，‘=f，“一要) 剀而永f视蔗 矗=”_=瞿 从J’面推导可以看出．在平行相机系统中，视差向量d变成-个标量，并且与深度=成反比(物体距相 机越近，其视差值越大)。实际相机系统存在偏差，垂直视差不完全为零，但可认为以《凶．。 视差估值(叩)与运动估值(^佃)比较相似，区别在于搜索范围不同。利用DE所得视差向量对立体图像 对中的一个图像进行视差补偿预测(DCP)，即町去除立体图像对内的相关性。 3基于MPEG一2的3DTV视频编码方案论证 3DTV视频采用分层编码结构，左右两个通道的视频信号分别对，直编码结构的基本层和增强层。这 样的编码结构可有三种编码方案：独立编码；层间视差补偿预澳I(DCP)编码；层内运动补偿预测(MCP)和 层问视差补偿预测(DCP)相结合的编码。 (1)独立编码 这是两通道图像序列分别进行MPEG-2编码的方案(图2)。该方案未利用两通道阃的相关性，编码 效率低。 (2)层间DCP编码 左通道图像采用通常的MPEG一2编码，右通道图像基于来自左通道(基本层)对应图像的DCP进行 编码(图3)。这种编码方案仍缺乏