基于对象多精灵编码在H.2 AVC中未分割应用研究.pdfVIP

基于对象的多精灵编码在H.264/AVC中未分割的

应用

MatthiasKunter∗，AndreasKrutz∗，MichaelDr¨ose∗，MichaelFrater∗∗，和ThomasSikora∗

∗通信系统组∗∗与电气

柏林工业大学新南威尔士大学

柏林，德国堪培拉，澳大利亚

将这两种对象掩模结合使用可以产生非常精确的分割结果。

尽管在混合块基编器的开发方面取得了的进展，

但研究表明，在低比特率场景中应用基于对象的技术仍然有编基于精灵的编码技术的第二个问题是背景的有限

码增益。我们提出了一种基于H.264功能的基于精灵的编客观重建质量。由于构建过程中的误差累积和空间失真，重新

器，使用内置的分割方法处理由旋转机录制的场景。投影的帧会。上这些误差往往无关紧要，但对于基于

分割本身是基于从精灵和短期图像配准中获得的可靠背景估计。SNR的评估，随着与参考帧的时间距离增加，失真也会增加。

此外，我们根据机参数估计生成多个精灵，克服了精此外，由于底层投影模型的几何特性，精灵的大小及其编码成

灵编码技术的三个主要缺点。首先，最小化了精灵图像的编码本会迅速增长。此外，如果机相对于参考帧旋转超过90度，

成本。其次，多个精灵允许时间背景刷新，最后，误差累则无法构建单个精灵。与一些启发式方法不同，Farin[4]提

积保持非常小。实验结果表明，这种编码方法显著优于应用分出了一种基于图像大小的算法来构建多个精灵，以解决这些问

层B帧的H.264扩展。题。在我们的方法中，根据录制机的粗略旋转角度和焦距

估计对序列进行划分[5]。因此，将帧分配给特定精灵不一定

索引术语—基于对象的编码，精灵编码，多个精灵，按顺序进行。这一对于重复出现的背景内容尤为重要。

H.264/AVC本质上，多精灵方法能够刷新后的背景，这在背景物体略

有变化的场景中很有帮助。

1.引言

先进的混合编码技术的发展导致了著名的

H.264/AVC编码[1]的几个扩展。由于其与早期我们利用H.264/AVC对对象进行编码。多个精灵的纹理作

（MPEG‑1,2,4）相比具有更高的灵活性，新的编码策略，例为帧内帧编码，分割的前景适应宏块结构，并以IBBB...帧结

如分层B帧的使用，可以轻松应用[2]。然而，研究表明，基于构和GOP=15进行编码。二值掩码编码利用H.246/AVC中

先前分析的冗余减少在多种类型的中优于传统的混合的二值算术编“M‑Coder”，并生成与变换参数一起的侧

编码。特别是在低比特率下，基于对象的编码（OBVC）信息。通过这项工作，我们了一种扩展的编码模式，适用

和精灵技术的使用非常有前景[3]。于某些具有旋转机的在低比特率范围内的选择。

基于精灵的编码已经成功地作为MPEG‑4视觉的一部

分。然而，关于其性能评估和与其他技术比较的物却很少本文其余部分组织如下：第2节描述了机校准和随后

[3]。多种多样