运动补偿及空域可伸缩视频编码技术研究.PDF

摘 要 视频信息生动直观，内容丰富，是传递信息的理想载体。但未经压缩处理的 视频数据，其数据量极其庞大，给信息的存储和传播带来了极大的困难，所以压 缩效率一直是视频编码领域关注的焦点。随着Internet 的迅猛发展，3G 移动通信 和无线宽带技术的成熟，网络逐渐成为人们日常生活的一部分，数字视频压缩的 重心也开始从面向存储转为面向传输，而网络传输的新特点及各种具有不同分辨 率和处理能力的多媒体终端的不断涌现，为视频编码应用提供了更广阔的舞台， 同时也提出了更多新的挑战。可伸缩视频编码技术以其高度的灵活性，可以适应 各种网络环境、各种用户终端及较高的编码效率而得到了学术界的青睐。本文首 先针对帧间亮度变化剧烈时运动补偿预测效率会大大降低这一情况，讨论了适应 于帧间亮度变化的运动补偿预测方法。随后将主要就可伸缩编码中的空域可伸缩 功能的实现进行研究探讨，提出了基于联合运动估计的空域可伸缩视频编码框架 及利用DCT 系数切分实现空域可伸缩功能的方法。本文的主要研究成果如下： 1. 提出了亮度变化自适应的运动补偿预测方法，可以减弱视频帧间的各种亮度 变化带来的影响，大大提高运动补偿预测的效率。 运动补偿预测是视频编码的关键技术，大多视频编码系统都采用了基于SAD 块匹配的方法进行运动补偿预测。而 SAD 块匹配准则在视频帧间有明显的 亮度变化时会严重影响运动估计的准确性，增大残差系数，降低运动补偿预 测的效率；而且预测效率的突然降低还会引起帧码率的突变，增大码率控制 的难度，不利于网络传输。这一问题得到了学术界的高度重视，很多处理方 法被提了出来。但已有方法大都针对镜头切换时的淡入淡出特效情况提出来 的，通常在帧一级或条带（Slice）一级作处理，这对全局性均匀渐变的亮度 变化有较好的效果，但对全局非均匀或局部的亮度变化效果就较差，而后两 种亮度变化也是普遍存在的。本文提出的亮度变化自适应的运动补偿预测方 法，在宏块一级做调控，运用新的变换及参数计算编码方法，可以很好的处 理全局和局部的亮度变化，大大提高运动估计的准确性，使视频帧码率更为 平滑，极大提高视频压缩效率。 2. 提出基于联合运动估计的空域可伸缩视频编码框架，在少量降低基本层编码 效率的情况下，大大提高增强层的编码效率。 视频码流主要包含残差，运动向量和模式选择三项数据。而空域可伸缩视频 编码中低分辨率的视频通常由高分辨率的视频下采样得来，它们之间在这三 个方面都存在着大量的冗余。MPEG-2 中提出的空域可伸缩视频编码框架以 其简单实用而得到了广泛的应用，很多改进算法都是基于这一框架提出来 的。但该框架只部分消除了残差方面的冗余，编码效率不高是它的最大缺点。 本文提出的基于联合运动估计的空域可伸缩视频编码框架，通过联合基本层 和增强层作运动估计，只生成一套运动向量和模式选择，这样可以极大的减 少运动向量和模式选择方面的冗余；同时使用了将基本层重构图像作为增强 层预测图像的选择之一的方法，可以很好的减少残差方面的冗余。这样就可 以减少上述三个方面的冗余，大大提高增强层的编码效率。该框架为了保证 增强层的运动补偿预测效率，设定运动向量精度是基于增强层的，这个增强 层精度的运动向量将编入基本层中，必然会增加基本层的负担。但通过在基 本层追加插值及调整运动估计参数等方法，可以保证基本层性能的下降在可 接受范围之内。相较于增强层压缩效率的提高，这个基本层性能的下降是完 全值得的。 3. 提出增强层与基本层在频域内结合生成增强层预测图像的方法。 在MPEG-2 空域可伸缩编码框架中，为了减少基本层和增强层之间的冗余， 增强层的预测图像有三个。一是增强层自身作帧内或帧间预测产生，二是基 本层重构图像上采样，三是前两者的均值结合。其中第三个预测图像与前两 个有重复之感，效果不够好。考虑到使用 DCT 变换下采样时，基本层图像 是增强层图像去掉高频信息后的产物。因此在生成增强层预测图像时，可以 走一个相反的过程，即以基本层为低频部分，结合增强层的高频部分，构成 一个具有完整频域信息的图像，然后反变换即可得到一个新的增强层预测图 像。以这个频域内结合生成的预测图像代替第三个预测图像，可以收到很好 的效果