移动多媒体技术基础 教学课件 作者 王波涛 第四章2.pptVIP

1.1多媒体技术概述 　　第四章移动多媒体的图像/视频编解码技术  主要内容 图像/视频编码概述 图像编码技术 视频编码技术 图形编码技术 1.图像/视频编码概述 数字图像: 静态图像: 以数字化的静态图像文件形式存储一个文件存储一幅图像表现自然景物、人物以及平面图形。 动态（或运动、序列）图像。 : 以数字化的动态图像文件形式存储，一个文件可以存储多幅图像。数据量非常大，通常需要采用压缩格式存储。当序列中每帧图像是实时拍摄的自然景象或活动对象时，简称视频。 图像编码技术分类： 第一代技术: 统计编码:如哈夫曼编码、算术编码; 行程编码 词典编码:如LZW编码; 预测编码 变换编码:如离散余弦变换、小波变换。 第二代技术:模型编码 混合编码：第一代+第二代技术 视频编码中图像帧的分类: I帧：帧内编码 P帧：前向预测编码 B帧：双向预测编码 不同类型帧采用不同压缩方法，提高压缩效率。 每一帧图像划分为许多片，每一片由许多宏块组成。 视频序列－图片组GOP（Group Of Pictures ） 空间特征 与JPEG编码类似 时间特征 相关性－预测编码（运动估计和运动补偿） I - Intra coded (spatially coded) pictures 内帧 帧内编码: JPEG: 1:7 P - Forward Predicted pictures 前向预测编码帧，I or P 由之前的帧来预测: 1:20 B - Bidirectional Predicted pictures 双向预测编码帧，I or P :1:50 帧顺序 －播放顺序：0 1 2 3 4 5 6 7 8 9 －解码顺序：0 3 1 2 6 4 5 9 7 8 图像编码中的信道抗误码技术 移动多媒体的图像编码中针对移动信道环境，发展了信道抗误码技术，如下： 1．片结构编码 片由一系列的宏块通过一定规律组成，片的划分下图所示。 通过引入片结构编码，可以有效降低包丢失率和减少视觉感受度的恶化。 在片的边界不允许进行帧内预测，这样就降低了丢包率，同时，引入片的概念也可使传输的单位数据包比较小，因为小的数据包总比大的数据包不容易被突发差错干扰，这样也降低了误码率。 2．灵活宏块组织 允许独立和分散的宏块以一定的逻辑规则映射到相应的片里，如下图所示。 可使用帧内预测和运动估计，只要相应的宏块属于同一个片。这样如果在传输中片1的某一宏块发生了错码，因为片0和片1是相互独立的，不会发生误码扩散。 片组的划分可任意排列，从而可任意的顺序发送和接收片，便于误码以后的再同步，片之间编码和解码完全独立，缩短了实时通信中端到端的延时。 灵活宏块组织示意图（阴影部分：片0，空白部分：片1） 3．冗余片 编码器还可放置一个甚至多个相同宏块的冗余片表示在相同的比特流中。 解码器根据重建基本片来对冗余的片做出反应，如果重建成功，则丢弃冗余的片。如果基本片丢失了，或许是由于包丢失造成的，那么冗余的片就可用于重建，适合高误码率的移动环境。 4．数据分割 解码靠近再同步标记的数据往往比解码远离它的数据更加精确 促使把最重要的数据放置在紧靠再同步标记之后，接着再放置其他不太重要的数据。 采用了数据分割的方法将重要性不同的码字分割开来，便于信道编码采用前向纠错的方法进行不等差错保护。 5. 不同级别的差错控制信道编码 一般使用信道编码来保护传输码流，提高传输码流的抗误码性。 对视频图像的重建起到至关重要作用的比特可以采用较高保护级别的信道编码 对图像的重建相对而言不是非常重要的比特采用较低保护级别的信道编码。 2.（静止）图像编码技术 JPEG技术 概述 JPEG编码器 JPEG操作模式 JPEG格式 2.1 介绍 什么是JPEG? Joint Photographic Experts Group， 1987 联合图片专家组：ISO和CCITT，制定标准 JPEG (发音 “jay-peg”) 是静态图像的压缩标准. 用于连续色调的静态图像，压缩比： 灰度图：5:1 彩色图：10:1 to 20:1 ，30:1 to 50:1，100:1 Bmp格式： 648KB JPEG格式： 25.6KB 2.2 JPEG编码器 图像压缩4步 颜色转换及采样 离散余弦变换DCT 量化Quantization DCT系数编码 2.2.1 颜色转换及采样 RGB-YCbCr 图像的亮度信息和色彩信息分离 Y=0.299R+0.587G+0.114B