自适应帧组残差操作视频图像压缩算法 adaptive gof residual operation in video compression.pdfVIP

第12卷第6期 电路与系统学报 V01．12No．6 JOURNAL0FCIRCUITSANDSYSTEMS 2007 2007年12月 December， 文章编号：1007·0249(2007)06．0089—06 自适应帧组残差操作视频图像压缩算法· 潘吉彦， 胡波 (复旦大学数字信号处理与传输实验室，上海200433) 擒要。在视频图像压缩中，经常通过引入残差操作(包括运动补偿)来去除视频图像的时间信息冗余。然而，当 视频流中有较大内容变化时，残差操作反而会使得待编码图像更为复杂，压缩效果受到很大损失。本文提出了一个能 够在对视频图像进行变换操作前就可以预测残差操作对重构视频图像质量影响的度量值，称为图像复杂度，并在此基 来的压缩效果的大幅下降，又给如何适时插入原始帧组提供了依据。实验表明，AGR0在各种视频流条件下都显著提 高了重构视频的峰值信噪比(PsNR)。 关键词t残差操作；图像复杂度；运动补偿；显著内容变化；3D．DwT．SPIHT；视频图像压缩 中图分类号·TN919．8文献标识码·A 1 引言 为了能够取得高质量的视频图像压缩，有效地去除视频流中空间与时间上的信息冗余是关键。空 间冗余的去除是利用帧内相邻区域图像信息的相关性，可以通过各种变换来实现，如离散余弦变换 (DcT)…或者离散小波变换(DwT)【2】；时间冗余的去除是利用帧间对应位置图像信息的相关性， 一J来实现。对于TF和McTF，需要将视频流划分成许多帧组(GOF)，滤波以帧组为单位进行。 无论采用何种方法去除时间冗余，都牵涉到帧问的残差操作：对于ME／Mc，其实质就是考虑了 图像运动因素后的帧间残差：对于TF和MCTF，为了进一步去除帧组间的时间冗余，通常进行帧组 残差操作，即将当前帧组减去前一帧组的最后一帧重构图像。当视频流在时间方向较平稳时，帧间相 关性相当高，残差操作(包括带运动补偿的和不带运动补偿的)能够很好地降低待编码图像的复杂程 度，提高压缩效率；但是，如果当视频流发生了较大的内容变化时(比如场景转换或背景突变)，残差 操作将反而会使得待编码图像包含更多的复杂细节，导致压缩效率的大幅下降。 因此，需要引入一个监督机制，探测视频流中是否发生了规模大到使残差操作产生负面效果的内 容变化。如果发生了这样的内容变化，则取消残差操作，这对于ME／MC来说，就是插入I帧；对于 TF和MCTF而言，就是不对帧组作残差。为了建立这样一个机制，必须先找到一个能够有效预测某 一帧(组)的压缩效果的量。该量的计算复杂度应该较低，且必须在对视频图像进行变换之前就能够 得出。一旦找到了这样一个量，即可在正式对视频图像进行变换操作之前就预测并比较残差操作前后 帧(组)的压缩效果，并据此决定是进行还是取消残差操作。 率失真函数能够给出特定帧(组)在各种码流长度下的重构失真程度pJ，对于不同的帧(组)，其 率失真函数是不同的，因此可以据此预测原始帧(组)与残差帧(组)哪一个的重构失真更小。但是， 在进行变换操作之前(即在空间域)就要求实时地给出某一帧(组)的率失真函数，具有很大的难度。 而且，并不需要估计对应于某一码流长度的重构失真的确切值，因此采用率失真函数来预测残差操作 前后帧(组)的压缩效率的相对高低是不可行且不必要的。 本文根据大量实验提出了一个称为“图像复杂度”的量，作为预测待编码帧组的重构失真程度相对 大小的依据，并基于此提出了自适应帧组残差操作(AGRO)视频图像压缩算法。该算法能够在对视 ‘收稿日期·2005-03．29修订日期：2005-09．13 万方数据 电路与系统学报 第12卷 频图像进行变换前就预测重构帧组PSNR的相对高低，决定是否进行残差操作，极大地降低了视频流 中较大内容变化对压缩效率带来的负面影响 间域冗余都通过小波变换去除，然后用3D．SPIHT对小波系数进行编码。该算法由于不对原始图像划 块，因此不需要使用去块效应滤波器，而且小波变换对于去除空间信息冗余的效率