第二章多媒体信息处理技术（课件）.pptVIP

多媒体信息的计算机表示 文字:通常用ASCII码表示 。 音频：就是声音的信息表示，通常指在15～2000Hz的频率范围的声音信号。恢复效果好。音乐合成一般采用MIDI标准，语音的合成没有统一标准。 图像：一般静态图像分为两种：位图和矢量图。位图适用于逼真、精细的照片式图像，而矢量图则适用于直线、方框、圆圈、多边形以及其它可用角度、座标和距离来进行数量化表示的图形。 动画 视频：是多媒体技术的重要组成部分。世界广播视频标准有NTSC、PAL、SECAM三种。 媒体种类 媒体：承载信息的载体，信息的表示形式。 信息交流—通过媒体。 最大来源：视觉、味觉、听觉、嗅觉、 触觉来认识自然界 种类:视觉: 65%，听觉:20% ，触觉:10%，味觉:2% 视觉：静止 (图像、文字)， 运动（影像、动画） 听觉：声响、语音、音乐 触觉：压力、运动、传感 其他：嗅觉、味觉 媒体的性质 (1)有格式的数据才能表达信息的含义：对媒体 类型的识别与解释 (2)不同媒体所表达的信息程度不同 如：你好！、文字、声音、表情 (3)媒体之间的关系也代表信息 媒体多样化关键：在于媒体之间信息表示的合成效果,更人类化的信息，“感觉相乘”效应。 远超过多种媒体单独表达时效果 多媒体信息的压缩的重要性 多媒体信息的数据量是非常庞大的，不仅在网络上进行实时传输时需要的传输速率大大超过了当前网络的数据传输率，而且对网络服务器的存储容量及多媒体信息的同步也都提出了很高的要求。 为了解决这些矛盾，在不断改善多媒体网络环境的同时，更重要的是必须对多媒体数据进行压缩。 一幅500×500的24bit真彩色图像约需6MB的存储量，如用传输速率为64kbps的ISDN信道进行传送，需要94秒才能完成，但用JPEG进行压缩后，存储量可降低近20倍，用同样的信道进行传输只需5秒。由此可见数据压缩的重要性。 多媒体信息存在冗余 空间冗余 时间冗余 编码冗余 结构冗余 知识冗余 视觉、听觉冗余 衡量压缩技术好坏指标 压缩比大 实现压缩算法简单、压缩、解压速度快、实时压缩、解压 恢复效果好 数据压缩方法的分类 （一） 按是否失真，分两类 无失真编码方法 冗余压缩法、可逆编码方法、去掉或减少数据帧中的冗余，解压后的还原图像与原始图像完全一致。 一般用于文本、数据的压缩。 压缩比较低 2：1～5：1 有失真编码方法 不可逆编码方法，压缩法，会减少信息量，解压后的图像与原始图像存在一定误差，一般用于图像、声音、动态视频等的压缩 。 数据压缩方法的分类（续） （二）? 按编码方法的原理划分 预测编码：针对空间冗余和时间冗余的压缩方法 变换编码：针对空间、时间冗余 量化与向量量化编码－针对空间、时间冗余 信息熵编码：针对编码冗余 分频带编码 结构编码 基于知识的编码 听觉媒体 通过声音形式以听觉传递信息的媒体。 声音媒体的种类： 1.波形声音：自然界中所有声音的“第一 印象”，类似于位图图像。 2.语音：人说话, 不仅是波形 ，还包含丰 富的语言学内涵、内在的语言 3.音乐：乐曲：符号化的声音 乐谱：转变为符号媒体形式的声音 MIDI音频：电子合成器合成的声音 听觉媒体的特性 1. 声音三要素： （ 音调，音强， 音色） 2. 声音的连续性 3. 声音方向感 4. 声音质量（ 频率范围越宽，质量越高） 语音质量：可懂、清晰、自然度，数据 量大， 实时性高。 音乐质量：保真度，空间感，音响效果 5. 声音是时基类媒体 过 程 性：时间性（前后相关性）、数据量大 、 实时性高。 伴 随 性：伴音，伴奏，气氛渲染，感觉相乘 音频信息处理技术 音频信息处理主要解决语音、音乐及其他声音的I/O 、压缩、还原、传输、存储技术 音频信息获取技术 音频信息数据化 音频信息压缩方法 音频压缩方法与标准 音频卡:完成声音采集、合成、混音、