多媒体技术及应用基础大学精读.ppt

1.多媒体数据压缩的基本原理 数据压缩的可行性 原数据中存在冗余 空间冗余 静态图像 时间冗余 视频 结构冗余 文本 视觉冗余 听觉冗余 * 大量颜色相同的块——无需逐像素保存，只记录相邻像素颜色相对变化值 空间冗余 空间冗余 仅需保存A、B坐标及颜色(深绿色，0，127，63) A(5,0) B(8,5) 0,127,63 时间冗余 连续两幅图像的背景相同 时间冗余的压缩 背景仅保留1份 时间冗余 不变化部分：较多 变化部分： 极少 后 续 帧 只 记 录 画 面 变 化 的 部 分 完整记录片段第1帧 电影解压缩回放过程和这类似 例如电影片段： 视觉、听觉冗余 视觉敏感度曲线 人耳听音范围 对人体器官感觉不到的信息可视为冗余 1.多媒体数据压缩的基本原理 压缩技术原理就是在尽量减少冗余量 数据量 -冗余量 = 有效信息量 压缩比=数据量 ÷ 有效信息量 压缩技术分类 无损压缩 有损压缩 数据压缩技术分类 无损压缩 利用数据统计特征进行压缩，可完全回复为原始数据 压缩比相对较低， 2:1~5:1 例如：RAR、APE 有损压缩 压缩过程中会删除对人类来说不敏感的信息；压缩后数据不能完全恢复为原始数据；但损失部分对理解原始信息的影响微小 压缩比高 主要应用于语音，图像和视频数据的压缩 例如：jpg, mp3, rmvb * 2.多媒体数据常用文件格式 图像文件格式 bmp ? jpeg 或 jpg, png, gif, … 视频文件格式 AVI，WMV、MPEG RMVB、FLV (适合网络播放) AVS（国内提出的音频视频编码标准） MP4，3GP（适合手机） 音频文件格式 cd audio, wav ； ape, mp3,wma, rm 压缩 未压缩 * 多媒体音频格式应用指南 CD Audio格式 WAV（waveform）格式 APE/flac MP3或wma RA格式 抓音轨,刻录 无损压缩 有损压缩 声波信号 2:1 10:1 3.存储多媒体数据的主要设备 硬盘 光盘 磁盘阵列 存储网络 光存储设备 光盘（120mm）+光盘驱动器 读写原理 * 光存储设备 光存储分类 按照光盘的读写功能划分 只读式光存储系统 一次写入式光存储系统 可重写光存储系统 按照光盘的存储结构划分 CD 700MB DVD 4.7GB, 8.5GB 蓝光光盘 25GB（单层） * 光存储设备 光存储设备的技术指标 存储容量 存取响应时间 数据的传输速率 光存储设备的优点 存储容量大 寿命长 价格便宜 * 多媒体技术研究的主要内容 * 多媒体数据的编码、压缩 （JPEG、MPEG、MP3） 多媒体创作和编辑工具 （PhotoShop） 多媒体数据的存储技术 （DVD） 多媒体应用技术开发 （影视、游戏） 多媒体智能技术 （语音识别） 多媒体通信和分布处理（视频会议） 多媒体关键技术 * 数据的压缩与解压缩 （压缩的必要性） 大容量光盘存储技术 （容量大、价格低、易携带、长寿命） 多媒体网络和多媒体通信（带宽要求更高） 超文本与超媒体（链接方法表示数据联系） 多媒体同步技术（分布在不同地方的数据如何组合） 多媒体系统（计算机系统、网络、多媒体数据的结合体） 背景问题 1张1920×1080的彩色照片占用多少存储空间？ 1部90分钟高清电影的视频（每秒24帧）数据量是多少？ 下载1部电影（带宽4Mb/s）需要多少时间？ 1920×1080×24 / 8 = 6220800(Byte) ≈ 6(MB) 6×90×60×24 = 777600(MB) ≈ 760(GB) 760×1024×1024×1024×8 / (4×106) / 3600 = 163200(秒) ≈ 450(小时) 如何解决！ 多媒体数据传输 第三部分 多媒体数据传输 多媒体数据传输的特点 流式传输技术与流媒体 网络 多媒体数据传输特点 非实时性业务数据 电子邮件、网页浏览、QQ消息 特点：对时延、传输速度要求不严，但不允许数据出错 实时性业务数据 以话音业务、视频为主的应用 特点：对时延，网络带宽要求较高，允许少量的数据传输错误 * 流媒体技术 多媒体数据通过网络传输的两种方式： 下载—先下载，后播放 流传输 ——边下载，边播放 * 播放第1部分 下载第2部分 播放第2部分 下载第3部分 下载第1部分 缓冲等待… 播放第3部分 下载第4部分 … … 播放 下载所有数据 等待下载完成… 分组 发出 1 2 3 4 5