《多媒体技术》第5章.pptVIP

第5章 视频编码 提 纲 视频基本概念 视频编码原理 视频编码标准简介 视频基本概念 数字视频是自然视觉图像在时间和空间上采样后的表现结果 自然视觉图像在某个时间点上被采样，从而形成一帧或一场 采样以某一固定间隔重复进行，从而获得运动视频图像 1/25秒或1/30秒 视频基本概念 视觉图像的表现精度需要用某种方法度量，以衡量一个视觉处理(通信)系统的性能 主观评价标准非常耗时，并且对观察者的反映很敏感 客观评价标准易于实现，但不能准确的匹配人的主观感觉 视频基本概念 视频基本概念 典型的自然视频场景是由多个对象组成的，每个对象具有各自的形状、深度、纹理以及亮度等 自然场景的颜色和亮度会随着场景缓慢变化(连续) 典型的自然视频场景的特点分为空域和时域两类 纹理变化，对象形状，颜色 对象运动，亮度变化，摄像头移动，视角变化等 视频基本概念 自然视觉图像在时域和空域上都是连续的 采用数字形式表示自然视觉图像涉及到自然场景在空域和时域上的采样 空域采样 由视频图像平面上的一个矩形网格组成 时域采样 由时间轴上固定间隔的静态帧组成 每个时空域上的采样点（像素）由一组表示亮度和色度的数字来描述 视频基本概念 空域采样 采样分辨率影 响采样图像视 觉质量 视频基本概念 更高的时域采样率（帧率）可以获得更平滑的视频场景，但是需要存储更多的采样点 帧率低于10帧/秒有时用在低码率视频通信中 运动会明显抖动，显得不够自然 帧率在10～20帧/秒之间是低码率视频通信的典型值 图像平滑，但具有快速运动的场景会出现抖动 25～30帧/秒之间是电视图像的典型帧率 视频基本概念 视频信号可以被采样成一系列完整的帧(逐行采样)，也可以采样成一系列交织的场(隔行采样) 在交织视频序列中，在每个时域采样间隔上采样一帧图像中一半的数据(一场) 一场包含一帧完整图像的所有奇数行或偶数行 视频基本概念 视频基本概念 常用的视频格式 视频编码原理 视频压缩(编码)是将大数据量的原始视频序列精简为小数据量的比特流的过程 对于一个分辨率为QCIF大小的彩色视频序列，每个分量采用8比特量化，在帧率为每秒30帧的情况下，数据量为9M比特/秒 视频压缩时通过去除图像中的冗余来实现的 冗余是指为了可信的重建原始数据而不需要的部分 视频编码原理 视频数据中包含的大量统计冗余可以通过无损压缩有效的去除 但无损压缩能够获得的压缩比很有限，最好的如JPEG-LS能够获得3-4倍的压缩 有损压缩对于获得高压缩比是非常必要的 在不明显影响观察者视觉质量的条件下，消除更多的主观冗余，来获得压缩比的提高 视频编码原理 大部分视频编码方法都利用时域和空域冗余进行压缩 视频编码原理 视频编码器主要包含三个功能模块 时域模型 空域模型 熵编码器 视频编码原理 时域模型的输入是未压缩的视频序列，通过利用相邻视频帧之间的相似性减小时域冗余 通过相邻帧对当前编码帧进行预测，并通过对预测误差进行补偿(运动补偿)来改善质量 时域模型的输出是残差帧以及一系列模型参数，如用来描述如何进行补偿的运动矢量 视频编码原理 空域模型的输入是残差帧，利用残差帧内相邻像素间的相似性来减小空间冗余 首先对残差值进行变换，用频域内的变换系数表示 对变换系数进行量化，去除不重要的值，保留少数量的重要系数，为残差帧提供精简表示 空域模型的输出是一系列量化后的变换系数 视频编码原理 时域模型(运动矢量)和空域模型(系数)的参数通过熵编码器进行压缩 去除了数据中的统计冗余，生成压缩码流 视频编码原理 时域模型的目标是通过得到一个预测帧，并在当前帧中减去预测帧，来达到减少帧间冗余的目的 预测越精确，输出的残差帧能量越小 预测精度的提高可以通过在当前编码帧和参考帧之间进行运动补偿实现 视频编码原理 Kell在1929年提出通过只传输两帧之间变化的部分来减少数据量 Intra和Skip 局限：除了简单的重复外，不能提供更精确的预测 以参考帧的内容为基础，进行微小的修改(调整)，可以获得更好的预测效果 发展成为现在的混合视频编码框架 视频编码原理 最简单的时域预测是用当前帧的前一帧作为预测 帧间预测编码 Frame Difference是指活动图象序列的某一固定象素位置(m , n)上，当前帧的图象亮度值Xτ (m ,n)与上一帧的亮度值Xτ-1(m ,n)之差，即 统计资料表明：①对于变化较为缓慢的256级灰度的黑白图象序列帧间差值超过阈值3的象素大约不到4%；②对于变化较为剧烈的256级亮度值的彩色电视图象序列，帧间差值超过阈值6的象素数平均只有7.5%，而色度信号平均只有7.5%。这些是帧间压缩编码的依据。 帧间差值 条件帧间修补法 Conditional Frame Replenishment CFR称条件帧间修补