第四章 多媒体技术教程.ppt

媒体分类 视觉 媒体分类 听觉 触觉 其他感觉 感知媒体：指人的感觉器官所能感觉到的信息的自然种类。如声音、图形、图像、动画、电影和文本等。人的感觉包括视觉、听觉、触觉、嗅觉、味觉等。感知媒体帮助人类感知环境的信息。目前，人类主要靠视觉和听觉来感知环境的信息。触觉作为一种感知方式也慢慢引入到计算机中。 人类从外部世界获取信息的70%~80%是从视觉获得，10%从听觉获得，其余的10%从触觉、嗅觉和味觉获得。 感知媒体例：文本 感知媒体例：图形和图像 感知媒体例：动画和视频 感知媒体例：音频 感知媒体例：音视频 表现媒体：指为人们再现信息的物理工具和设备（输出设备），或者指获取信息的工具和设备（输入设备）。如显示器、扬声器、打印机等输出类显现媒体，以及键盘、鼠标器、扫描器等输入类表现媒体。 存储媒体：指存储数据的物理介质，如纸张、磁盘、光碟等。 传输媒体：指传输数据的物理媒介，如双绞线、同轴电缆、光缆、无线电链路等传输媒体。 传输媒体：电缆 传输媒体：光纤 传输媒体：无线 “多媒体（multimedia）”一词大约在1960-1965年开始使用，其中“multi”是“许多”的意思。术语“多媒体”的原意是指“通过计算机、电视、电话等散布和表现用图形、动画、音频、视频、文本等格式编码的信息”。 多媒体 = 多种媒体数据 + 一系列交互 多媒体 = 多种媒体数据 + 一系列交互 多种媒体数据：多种源的、多种类型的和多种格式的数据（multisource, multitype and multiformat data）的集合。 多媒体成分之间的交互：由复杂的关系组成。如果没有这些关系，多媒体只能是音频数据、视频数据与其他数据的简单集合。 交互 交互是人类获取信息、掌握知识的重要途径 看见的信息人们只能记住20% 听见的信息人们只能记住30% 既看见同时又听见的信息人们能记住50% 既看见同时又听见并且也参与的信息人们能记住80% 1.1.3 多媒体分类和描述 从人类感知角度划分，媒体可以分成听觉媒体、视觉媒体、触觉媒体、嗅觉媒体和味觉媒体等五大类。 听觉媒体又称为可聆听（Audio）媒体，视觉媒体又称为可视（Visual）媒体。现在多媒体包含的主要是可听和可视两大类。 多媒体的描述 值（Value） 表现域（presentation domain），又称为表现空间（presentation space） 表现维（presentation dimension） 多媒体描述 值：不同媒体形式的信息都是用“值”来表示 表达值可以是一序列连续值或者一个单值序列。 不同媒体形式的信息其表示一般也是不同的 自包含的量或物理量（例如温度、味觉、嗅觉） 符号（例如文字符号，手势） 表现域： 媒体需要在一定的表现域中才能表现。 可以是时间域，空间域，或时间-空间域。 示例：超文本（Hypertext）的表现空间是网络空间或赛伯空间（Cyberspace）。立体电影需要四维时空域，即X、Y和Z轴，再加上时间轴。 表现维：每一个表现空间有一个或多于一个的表现维 示例：声音，一维；图片，2维 多媒体分类和描述 如果媒体的显示域是一个连续域，这种媒体一般称为模拟媒体（analog medium）或连续媒体（continuous medium）。 如果媒体的显示域是一些离散的点，这种媒体一般称为离散媒体（discrete medium）。 多媒体分类和描述 按照显示域里的时间维，媒体被分为非时间媒体或离散媒体与时间媒体或连续媒体两类。 非时间媒体或时间离散媒体。它们由不依赖于时间的信息组成。 时间媒体或时间连续媒体。其显示要求随时间变化连续地播放 。 时间离散媒体 时间连续媒体 多媒体分类和描述 从网络连接的角度，媒体可以分为非实时媒体和实时媒体两大类。 根据应用的不同，上述时间离散媒体既可能是非实时的，也可能是实时的。 媒体的网络分类 数字媒体 在多媒体技术中，绝大多数数字媒体是对模拟媒体进行适当处理而得到的。 采样 量化 连续幅度的离散化通过量化来实现，就是把信号的强度划分成一小段一小段，并用某种准则（例如四舍五入）将其数值表示出来。如果幅度的划分是等间隔的，就称为线性量化，否则称为非线性量化。 模拟-数字转换的两个问题 采样频率(fs)：每秒钟需要采集多少个信号样本 量化精度：每个信号样本的比特数b/s(bit per sample)应该是多少 奈奎斯特理论（Nyquist theory） 采样频率不应低于模拟信号最高频率的两倍，这样就能把以数字表达的信号还原成原来的信号，这叫做无损数字化（lossless digitization） fs ≥ 2f 或者 Ts ≤ T/2 其中f为被采样信号的最高频率，T