第三章 流媒体编解码技术.pptVIP

Chapter 3流媒体编解码技术 流媒体编解码技术 MPEG 简介 MPEG-1 和 MPEG-2 标准 MPEG-4 视频编码标准 MPEG-7 标准 MPEG-21 标准 H.261 标准 H.263 标准 H.263+ 和 H.263++ 标准 H.264 标准 流媒体编码压缩新技术 3.1 MPEG 简介 MPEG：Moving Pictures Experts Group（运动图像专家组） 负责制订适用于数字存储媒介、电视广播和通信等应用场合的视频和音频数据的压缩编码标准 MEPG-1，MEPG-2，MEPG-4，MEPG-7 和 MEPG-21 3.2 MPEG-1 和 MPEG-2 标准 MPEG-1 标准全称：Coding of Moving Pictures and Associated Audio for Digital Storage Media at up to about 1.5Mbp/s 第一部分说明了如何根据第二部分（视频）以及第三部分（音频）的规定，对音频和视频进行复合编码。 第四部分说明了检验解码器或编码器的输出比特流符合前三部分规定的过程。 第五部分是一个用完整的C语言实现的编码和解码器。 MPEG-2 标准全称：Generic Coding of Moving Pictures and Associated Audio Information 3.2.1 MPEG-1/-2 标准中的三种编码类型图像 I 帧 A I-frame is encoded using only information from within that frame(intra coded) -- no temporal compression(inter coded) P 帧 P frame (predicted frame) use preceding frame as reference image B 帧 B frame (bidirectional frame) use both preceding frame and following frame as reference images 3.2.2 视频码流的分层结构 视频数据经过压缩编码后形成视频基本码流（ES） MPEG 用句法规定了一个分层结构 对分层要求：支持通用性、灵活性和有效性 MPEG 视频基本码流的分层结构 3.2.2 视频码流的分层结构 从上至下依次为：视频序列层(Sequence)，图像组层(GOP：GroupofPicture)，图像层(Picture)，像条层(Slice)或宏块条（片）层，宏块层(MacroBlock)和像块层(Block)。 除宏块层和像块层外，上面四层中都有相应的起始码，可用于因误码或其它原因收发两端失步时，解码器重新捕捉同步。因此一次失步将至少丢失一个像条的数据 。 3.2.2 视频码流的分层结构——序列层 序列指构成某路节目的图像序列，序列起始码后的序列头中包含了图像尺寸，宽高比，图像速率等信息。序列扩展中包含了一些附加数据。为保证能随时进入图像序列，序列头是重复发送的 。 3.2.2 视频码流的分层结构——GOP层 一个图像组由相互间有预测和生成关系的一组I、P、B图像构成，但头一帧图像总是I帧。 GOP头中包含了时间信息。 问题：在两个参考帧之间插入几个B帧？ （1）B帧数目的增加会降低B帧和参考帧之间以及参考帧与参考帧之间的相关性； （2）B帧数目的增加要求增大参考帧中运动估计的搜索范围；B帧数目的增加会增加接收的延迟时间和要求增加接收机内缓存器的容量； 3.2.2 视频码流的分层结构——图像层 包括不同编码类型的图像，即I、B、P帧； MPEG-1中，逐行扫描（帧格式）； MPEG-2中，逐行或隔行（场格式）扫描； PIC头中包含了图像编码的类型和时间参考信息 。 3.2.2 视频码流的分层结构——宏块条层 包括若干个连续宏块，其顺序和行扫描顺序一致 从一个宏块行（16行宽）的任何一个宏块开始 MPEG-2 MP@ML 中，一个宏块条必须在同一宏块行中起始和结束，且一个宏块条至少包括一个宏块 比特流重新同步的基本单元 3.2.2 视频码流的分层结构——宏块层 运动补偿预测的基本单元。 MPEG 算法在 P 帧和 B 帧中以宏块为单位自适应地选择合适的运动补偿预测模式（在 I 帧中全部宏块都采用帧内编码模式）。 P 帧中的宏块采用前向运动补偿预测模式；当预测效果不佳时，切换到帧内编码模式。 B 帧中的宏块采用何种模式取决于哪一种模式下对该宏块进行编码时所需的比特数最少。 3.2.2 视频码流的分层结构——宏块层（Cont’d