多媒体通信技术视频编码跟速率控制资料.pptVIP

第07讲 视频编码及速率控制 作业 1. 简单解释一下视频编码中I帧和Slice片层存在的意义或作用 2. 试述前向预测、后向预测和双向预测的概念 3. 若在一个有6帧图像的GOP中，各帧的比例为I:P:B=1:2:3。画出该GOP序列，用箭头表明P帧和B帧的参考帧，并给出各帧输入、编码、传输、解码和显示的顺序。并说明编码延时和解码延时各为多少，以及延时和B帧数目的关系。(提示：分别对“闭GOP”和“开GOP”讨论) (2) 码率调整 根据缓冲器的充满程度来改变当前slice的量化参数Q： 充满程度buffer_content通过下式更新： SB和NB分别为上一slice的实际编码和预定编码比特数。 TM 5 速率控制 MPEG2标准的速率控制的测试模型，控制方案相对比较复杂： (1) 目标比特分配 原则：编码产生的平均码率与指定信道速率相匹配 其比特分配不仅考虑编码的类型，还考虑了图像内容的复杂程度。 (2) 码率调整 假设3个虚拟缓冲器，分别用于一种类型(IPB)图像的编码输出，这样使某帧编码实际比特数更接近预分配的比特数。 (3) 自适应量化 考虑了视觉的空间域掩蔽效应，某宏块的量化参数由参考量化参数Q和活跃程度确定。 速率控制中的率失真模型 将率失真函数引入速率控制 低延时应用的速率控制TMN8 帧级速率控制 宏块级速率控制 基于率失真优化的速率控制JVT-G012 GOP级速率控制 帧级速率控制 * 信息科学与工程学院 宁波大学 Ningbo University * 典型的视频编解码处理 图像复杂度分析速率控制 DCT Q 熵 编码 缓存 DQ IDCT 运动补偿预测 参考帧存储 运动估值 预 处理 熵 编码 DQ IDCT 运动补偿 帧 存储 － 解码器 编码器 视频 信号 输入 视频 信号 输出 1条 2条 3条 4条 5条 6条 7条 8条 9条 10条 1 2 3 4 5 6 Y Cb Cr 条(slice)结构 宏块结构 A/D A/D A/D γ校正 γ校正 γ校正 RGB 到 YCrCb 变换 滤波 滤波 滤波 2:1 亚取样 2:1 亚取样 R G B Y Cr Cb 图像信号预处理 运动估值/补偿 采用具有运动补偿的帧间预测； 运动估值部分，亮度图像分割成16×16的宏块； 搜索范围可以取±128(H)×±32(V) DCT变换 将宏块再分成8×8子块 83 69 56 46 38 35 29 27 69 56 46 38 34 29 27 26 58 48 40 35 32 29 27 26 48 40 35 32 29 27 26 22 40 37 34 29 27 26 22 22 38 34 34 29 27 26 22 19 37 34 29 27 24 22 16 16 34 29 27 26 22 19 16 8 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 16 帧内编码的量化矩阵 帧间编码的量化矩阵 量化 通过量化，保留重要的DCT系数，将其数值进一步离散化，并将不重要的DCT系数量化到零。 对不同的DCT系数根据其重要程度的不同采用不同大小的量化台阶。 63 62 58 57 49 48 36 35 61 59 56 50 47 37 34 21 60 55 51 46 38 33 22 20 54 52 45 39 32 23 19 10 53 44 40 31 24 18 11 9 43 41 30 25 17 12 8 3 42 29 26 16 13 7 4 2 28 27 15 14 6 5 1 0 63 59 49 45 33 29 14 13 62 58 48 44 32 28 15 12 61 57 47 43 31 27 16 11 60 56 46 42 30 26 17 10 55 51 41 35 25 18 9 3 54 50 40 34 24 19 8 2 53 39 37 23 21 7 5 1 52 38 36 22 20 6 4 0 之字形扫描顺序 交替扫描顺序 熵编码 0 0 0 0 0 0 0 0