数字声音及MIDI简介精要.ppt

MMT; 声音是携带信息的极其重要的媒体(20%)，是多媒体技术研究中的一个重要内容。声音的种类繁多，如人的话音、乐器声、动物发出的声音、机器产生的声音以及自然界的声音等。 这些声音有许多共同的特性，也有它们各自的特性。在用计算机处理这些声音时，既要考虑它们的共性，又要利用它们的各自的特性。 我们将研究声音的基础知识，掌握声音数字化的两个最基本的概念；了解基本的音频信号编码技术。; 声音是通过空气传播的一种连续的波，叫声波。 反射 (reflection)、折射 (refraction)和衍射 (diffraction) 声音信号是由许多频率不同的分量信号组成的复合信号。复合信号的频率范围称为带宽。; 带宽为20Hz－20kHz的信号称为音频（audio）信号，可以被人的耳朵感知。话音信号带宽在80Hz～3400Hz。 频率决定音调。;乐音;声音的三要素;声音质量的度量;信噪比（SNR）度量;第2节 声音信号数字化;采样（sampling）：将声音信号在时间上离散化，即每隔相等的一段时间抽取一个信号样本。;量化（quantization）：将连续的信号幅度离散化。如果幅度的划分是等间隔的，称为线性量化，否则为非线性量化。一般紧跟编码过程。;量化步长越长，压缩字节越多，但是误差越大。 量化步长越短，压缩字节越少，但是误差越小。;采样频率 奈奎斯特理论指出：采样频率不应低于声音信号最高频率的两倍，这样就能把以数字表达的声音还原成原来的声音，称为无损数字化。 fs = 2fmax 例如话音信号最高频率约为3.4kHz，所以采样频率取为8kHz。;采样精度 每个声音样本的数字化位数。反映声音波形幅度的采样精度。也直接决定数据率的大小。;人－机通信，计算机接收音频信号。获取、语音识别与理解。 机－人通信，计算机输出音频。音频合成；声音重构、模拟。产生真实感声音。 人－机－人通信，人通过网络进行语音通信，需要的处理包括：语音采集、编码解码、传输、检索，识别。;关于音频信号的几个问题;音频信号处理的流程;音频卡结构;第4节 WAVE音效和MIDI音乐;缺点：wav文件需要占用很大的贮存空间。 为了节省存贮空间，人们使用各种算法对wav文件进行压缩，时下极为流行的MP3就是一种高压缩比低失真的压缩算法。;WAVE文件格式;;8位单声道;（MIDI）Musical instrument digital interface;电子音乐合成;频率调制（FM）合成法;由以下五部分组成： 数字载波器 调制器 声音包络发生器 数字运算器 模数转换器;FM合成法的发明人：John Chowning 20世纪60年代，在斯坦福大学和他的同事研究FM理论和合成技术，1966年研究成功，成为使用FM制作并录音的第一人。 之后John Chowning通过斯坦福大学寻找美国的制造商。 被YAMAHA采用。 ;乐音样本合成法;Wavetable合成器的工作原理;MIDI实质上是由MIDI控制器（或MIDI文件）产生的指示电子音乐合成器要做什么、怎么做（如演奏某个音符、加大音量、生成音响效果）的一套标准指令。MIDI不是声音信号，在MIDI电缆上传送的不是声音，而是动作指令（MIDI文件）。; 各个MIDI设备通过专用的串行电缆(MIDI线)连接， 并以 31.25 kb/s（每字节10位） 的速度传送着数字音乐信息。;MIDI通道的概念;MIDI设备的复杂连接;MIDI指令举例;MIDI小结;小结