视频音频基础知识.ppt

MPEG2编码框图 * DCT离散余弦变换 1 TV line (64us) 720 pixels “Luminance” 700mV 0 mV frequency 1 TV line (64us) 720 pixels “Luminance” 0 mV frequency DCT变换 Y分量原始数据 DCT系数 以8x8块为单位，反变换后可完全复原原始数据,无损。 量化 量化是针对DCT系数进行的，量化过程就是以某个量化步长（QP）去除DCT系数。量化步长的大小称为量化精度，量化步长越小，量化精度就越细，则量化造成的失真就越小。 去除视觉上不敏感的数据，是变换编码中的真正对数据进行有效压缩的步骤。 不可逆过程，有损。 CBR（恒定码率，QP变化） VBR（变码率，QP固定） 量化 Z型扫描 15,0,-2,-1,-1,0,0,-1,0,0,0,0,0,0,… 游程编码 扫描后的DCT系数中存在很多零系数，可以只告诉解码器那些非零系数，并告之两个非零系数之间有多少个零，则解码器可通过插入零系数的方法恢复数据，这种方法称为游程长度编码。 15,3,0,0,0,2,0,0,0,0,0,1,0,0,0,0,0,0,1… (0,15),(0,3),(3,2),(5,1),(6,1）… VLC编码 频繁出现的数据用较短的码字表示，不经常出现的数据用较长的码字表示，则平均码字长度最小。 15,3,0,0,0，2,0,0,0,0,0,1,0,0,0,0,0,0,1 (0,15),(0,3),(3,2),(5,1),(6,1） VLC0111000111,0000110 --33比特 原始00000011… --152比特 运动估计 运动估计以宏块（16x16）为单位进行 在参考帧搜索匹配块，计算被压缩图像与参考图像对应位置上的宏块间的位置偏移，即运动矢量 参考帧 当前编码帧 （-6，-1） 运动补偿 根据运动矢量，计算参考块与当前编码块之间的误差 对误差进行DCT、量化、VLC编码 解码时将该误差与参考块叠加，得到当前图像 帧间编码类型 I帧 B帧 P帧 编码序列 1 2 3 4 5 6 7 8 9 10 I B B P B B P B B P 1 4 2 3 7 5 6 10 8 9 I P B B P B B P B B 原始图像顺序 编解码图像顺序 色度下采样 4 5 0 1 2 3 Y Cr Cb 编码的块噪声 码率越低，量化步长越大，则块噪声越明显。 图像分辨率、帧率与码率的关系 视频编码标准 标准 分辨率 码率 应用范围 H.261 176?144～ 352?288 64kb/s～2.048Mb/s 窄带电视会议、可视电话 MPEG1 352?288 1.5Mb/s VCD H.262/MPEG-2 352?288～ 1920?1152 1.5～50Mb/s 数字视频广播（DVB），DVD,高清电视（HDTV），宽带电视会议 H.263/H.263+ 128?96～ 1408?1152 协议本身没有对码率进行限制，码率取决于传输通道。同等图像质量下，码率是H.261的一半，比MPEG-2节省30% 主要面向窄带应用，但码率在600kb/s时可极大提高图像质量，现在基本上取代了H.261，应用于窄带电视会议、视频监控等场合 视频编码标准 三基色原理：任何颜色均由红（R）、绿（G）、兰（B） 三种颜色分量组成； 在电视原理里，用亮度（Y）、蓝色差（U）、红色差（V）三个分量表示。两种方法相互之间的转换： Y = 0.3R + 0.59G + 0.11B U = B – Y V = R – Y R = Y + V 标准 分辨率 码率 应用范围 MPEG-4 176?144～ 1920?1088 移动视频编码速率为5～64kb/s，影视(352?288～720?576)应用速率可达15Mb/s。对于1920?1080的应用可达38.4Mb/s。比H.263节省17%,比MPEG-2节省43%。 主要面向多媒体应用，如低比特率移动多媒体通信，流媒体，基于内容的交互多媒体数据库检索。监控场合应用较多。 H.264/MPEG-4 AVC 128?96～ 1920?1152 同等图像质量下，码率比H.263节省50％，比MPEG-4 ASP节省28%，比MPEG-2节省64% 视频通讯（如电视会议、可视电话）,数字电视广播，视频存储播放，监控 H.264 SVC H.264 SVC 编码器产生的码流包含一个或多个可以