DVA03f_运动补偿和估计解说.ppt

* 视频编码器控制 编码模式判决 编码模式（帧内/帧间/运动补偿） 块尺寸 运动矢量 量化步长 DCT 系数的抑制 方案 Lagrangian 代价函数用于模式判决 难点 边信息的联合熵编码 时域相关性，由于 DPCM 结构 * 运动补偿编码的发展里程 帧内编码：只利用了空间相关性 → DCT [Ahmed, Natarajan, Rao 1974], JPEG[1992] 条件补充 → H.120 [1984] (DPCM, 标量量化） 帧差值编码 → H.120 Version 2 [1988] 运动补偿：整数象素精度位移 → H.261 [1991] 半象素精度运动补偿 → MPEG-1 [1993], MPEG2/H.262 [1994] ? 象素精度运动补偿 MPEG-4 [1999]，H.264 [2004] 变块尺寸的运动补偿 → H.263 [1996], MPEG-4 [1999]，H.264 [2004] * 运动补偿编码的效率 * 运动补偿编码的效率 * 运动补偿编码的效率 * 块方式运动补偿的问题 对于低码率，基于块的运动补偿导致明显的块效应。 预测差值的 MSE 在块内不是均匀的。 * 重叠块运动补偿（Overlapped Block Motion Compensation, OBMC) 思路：叠加几个预测信号，也使用来自相邻块的运动矢量。 块 b 的窗函数 每个块使用相同的的窗函数，例如 块 i,j 的参考点，例如块中心 对 最小 MSE 优化的窗函数 * OBMC 预测误差的分布 * 多帧预测混合编码 * 多帧视频压缩方法 双向预测帧（B-帧） 运动补偿内插（Robbins 1981） 编码内插误差（Micke 1986；Puri 1989； US Patent Yonemitsu, Andrews 1990） MPEG 标准（1993）和 ITU-T H.263（1995） 编码延时长，但解码延时短 多帧运动补偿预测 可变延时，提高误码 Resiliency （Budagavi，Gibson 1996) ITU-T H.263 附件 N，用于提高误码 Resiliency 的参考帧的选择，1997 可变延时，用于提高压缩 （Wiegand, Zhang, Girod 1997） ITU H.263, 附件 U 草案，增强的参考帧选择，1999 过去多帧图象的线性组合 （Flierl, Wiegand, Girod 1998] 没有额外的编解码延时。 * MPEG B-帧 图象 * 多帧预测 * 预测增益：1 或 10 个先前帧 没有对差值编码； 整数象素精度； * 运动和时间延时的估计和 R-D 性能 如何寻找率限制下的最佳 （dx,dy,dt) ？ Lagrangian 代价函数： 预测差值测量 (MSE, MAD) （dx,dy,dt) 的比特率 在“增强参考图象选择”下，H.263 编码器的 R-D 性能 * 多帧预测视频压缩性能的提高 * 基于模型的运动补偿混合编码 * 基于模型的 MCP混合编码的结果 * 基于模型的 MCP混合编码的 R-D 性能 * 运动补偿预测编码小结 运动补偿预测利用了视频序列连续帧之间的相关性 混合编码联合了运动补偿的帧间 DPCM 和空间 2D 编码 在一个搜索窗内用一定的判决准则寻找最佳匹配块 块匹配法的全搜索法和快速搜索法 分级块匹配使用了分辨率的金字塔分割 通过视频信号内插，得到了半象素精度的块匹配 比特率约束的运动补偿使用了 Lagrangian 代价函数 运动补偿预测差值的功率谱密度是平坦的。 整数象素精度的运动补偿的最大增益约为 0.8bit/Sample。 多帧运动补偿预测编码 谢谢！ MOPS :每秒百万次运算 GOPS:十亿次 * * 北京邮电大学信息与通信工程学院多媒体技术中心 北京邮电大学信息与通信工程学院多媒体技术中心 信息与通信工程学院多媒体技术中心 数字音视频原理 Principle of Digital Video Audio 第 3 讲 数字视频取样 数字视频压缩技术 数字视频压缩标准 * 本节内容 3 - 数字音视频取样、压缩和复接 运动补偿和估计 1) 运动补偿预测混合编码 2) 运动矢量搜索方法 3) 运动补偿性能分析 4) 多帧运动补偿预测混合编码 5) 基于模型的运动补偿预测混合编码 * 运动补偿预测 对于静止或运动缓慢的图象时 ，帧间差值信号比帧内相邻象素间的差值信号的直方图具有更为尖锐的，以零为中心的 L