多媒体重点分解.docxVIP

流媒体与服务体系架构的理解 流媒体系统的组成部分及其作用，它们之间的关系是什么 第一章 多媒体原理与系统设计 媒体：指信息传输、存储和呈现的载体。 多媒体（技术）：指融合了两种以上感觉媒体的协同应用系统和技术，以帮助人们获得更丰富的应用体验。 多媒体技术的特点：媒体形式的多样性、 媒体技术的集成性、媒体应用的交互性。 核心问题、面临的挑战 1多媒体流包含大量的数据,必须迅速处理。 2必须同步音频和视频同时启动和停止,并以同样的速度 3所示。数据可以来自许多来源,包括本地文件、计算机网络、电视广播和视频相机。 4所示。数据有多种格式,如视听传播的交叉(AVI),先进的流媒体格式(ASF),运动图像专家组(MPEG),以及数字视频(DV)。 5。程序员不知道提前什么硬件设备将出现在最终用户的系统。 第二章 数字音频压缩 要求：理解PCM、DM、ADPCM、Sub-ADPCM音频编码技术原理；知道A-law,u-law的概念；了解G.7xx系列语音编码标准。 PCM编码：通过脉冲编码调制方法生成数字音频数据的技术或格式。 DM：增量调制编码（DM） 通过增量起伏来记录模拟音频信号实际变化过程的数字音频编码。 ADPCM：自适应差分脉冲编码调制ADPCM Sub-ADPCM：子带自适应差分脉冲编码调制SUB-BAND ADPCM μ律压扩（μ- law codec ） 由μ系数调节的对数函数型非线性量化PCM编码 A律压扩（A- law codec ） 由A系数调节的分段函数型线性与非线性组合量化构成的PCM编码。 G.711 PCM G.721 ADPCM G.722 SUB-ADPCM G.723 ADPCM WAVE文件{ RIFF WAVE Chunk ID = ‘RIFF’ RiffType = ‘WAVE’ ------------------ Format Chunk ID = ‘fmt ’ ------------------ Fact Chunk(optional) ID = ‘fact’ ------------------- Data Chunk ID = ‘data’ } 如何操作PCM数据（声道切换）【复习】 第三章 音频数据处理程序设计 第四章 无损数据压缩 要求：理解算术编码、行程编码原理；掌握字典编码算法，能够对给定的报文进行编码或解码。 行程编码原理：111122222 （1,4）（2,5） abcdddddddddffffgggg ( 20 chars) 则可用如下的索引+索引对象（重复对象）方式代表之 abc9d4f4g ( consume 9 chars) 必考 字典编码算法： 第一类字典编码： 第二类字典编码： 词典编码： LZ77\LZSS\LZ78 区别、特点、优点 能对给定的报文进行编码或解码： 第五章 数字图像基础 要求：理解数字图像的概念，掌握色彩空间的相关理论，对BMP图像格式有深入了解。 数字图像：数值图像（digital images）是用二维像素矩阵表示的图像。 色彩空间： HSV模型（色相、饱和度、亮度值） CMYK模型（青品黄三原色+黑） RGB模型 RGBA模型（A为透明度） BMP图像格式： 真彩图像：像素值直接表示了颜色属性的彩色图像称为真彩图像。 第六章 图像处理程序设计 第七章 数字视频基础 要求：重点掌握模拟视频信号格式；也要理解模拟视频的数字化过程，特别对采样格式，如4:2:2等，要有正确理解。 模拟视频信号格式 模拟视频的数字化过程 对采样格式的理解 第八章 数字视频编码 要求：本章是重点，需要掌握MPEG视频编码原理，对I帧、B帧、P帧有正确理解；理解MPEG-1/2与MPEG-4的异同。 I-frame：采用帧内编码的图像 P-frame: 采用单向预测编码的图像 B-frame: 采用双向预测编码的图像 第九章 MPEG音频 要求：理解心理声学模型；理解MP3 的概念。 心理声学模型： 由于存在听觉阈值，因此当输入信号的电平地低于听觉阈值时，系统就去掉这些信