[工学]ch2数字声音及MIDI简介.ppt

多媒体技术基础 第二章：数字声音及MIDI简介 主要内容 声音本质与听觉特性 声音质量的度量 声音信号数字化 音乐的基础知识 电子音乐合成技术 电子乐器数字接口（MIDI） 声音是携带信息的极其重要的媒体（20％） 声音是通过空气传播的一种连续的波，叫声波，也具有反射、折射和衍射现象。 声音信号是由许多频率不同的分量信号组成的复合信号。复合信号的频率范围称为带宽。 高保真声音（10～20KHZ）带宽约为20KHZ 视频信号带宽6MHZ 频率低于20HZ的次音信号 带宽为20Hz－20kHz的信号称为音频（audio）信号，可以被人的耳朵感知。人说话一般是300～3000HZ。 高于20KHZ是超声波； 声音信号得两个几本参数： 频率 幅度 声音的分类 波形声音 语音 80－3400Hz 音乐 声音的三要素 音调、音强、音色为声音的三要素。 音强（响度）取决于声音的幅度（分贝）。 音调取决于声音的频率。 音色是由混入基音的泛音所决定的。 声音的听觉特性 人的耳朵对声音强度的反应成对数形式 声音的方向性 声音的掩蔽特性（时域掩蔽、频域掩蔽、MP3） 声音质量的度量 声音的质量与声音的带宽有关，一般来说频率范围越宽，声音质量也就越高。 声音信号数字化 过去，大多数电信号的处理一直是用模拟元部件(如晶体管、变压器、电阻、电容等)对模拟信号进行处理。 如果把模拟信号转变成数字信号，用数字来表示模拟量，对数字信号做计算，这就出现了数字信号处理器(digital signal processor，DSP)。 在数字域而不在模拟域中做信号处理的主要优点是： 首先，数字信号计算是一种精确的运算方法，它不受时间和环境变化的影响； 其次，表示部件功能的数学运算不是物理上实现的功能部件，而是仅用数学运算去模拟，其中的数学运算也相对容易实现； 此外，可以对数字运算部件进行编程，如欲改变算法或改变某些功能，还可对数字部件进行再编程。 声音信号是典型的连续信号，不仅在时间上是连续的，而且在幅度上也是连续的。 声音进入计算机的第一步就是数字化，数字化实际上就是采样和量化。 声音信号数字化 采样（sampling）：将声音信号在时间上离散化，即每隔相等的一段时间抽取一个信号样本。 声音信号数字化 量化（quantization）：将连续的信号幅度离散化。如果幅度的划分是等间隔的，称为线性量化，否则为非线性量化。 声音信号数字化 采样频率 奈奎斯特理论指出：采样频率不应低于声音信号最高频率的两倍，这样就能把以数字表达的声音还原成原来的声音，称为无损数字化。 fs = 2fmax 话音信号最高频率约为3.4kHz，所以采样频率取为8kHz。 声音信号数字化 采样精度 每个声音样本的数字化位数反映了声音波形幅度的采样精度（b/s）。 信噪比得计算。 SNR＝ 10 log [(Vsignal)2 / (Vnoise)2]＝20 log (Vsignal / Vnoise)其中，Vsignal表示信号电压，Vnoise表示噪声电压；SNR的单位为分贝(db) 例1：假设Vnoise＝1，采样精度为1位表示Vsignal＝21，它的信噪比SNR＝6分贝。 例2：假设Vnoise＝1，采样精度为16位表示Vsignal＝216，它的信噪比SNR＝96分贝。 声音信号数字化 声音信号数字化 声音工具 Sound Recorder 买声音卡时带的工具 网络上下载的工具 声音信号数字化 声音质量的度量 用信噪比(signal to niose ratio，SNR) 主观度量声音质量的方法－主观平均判分法，所得的分数称为主观平均(mean opinion score，MOS)分。 音乐 音乐起初是与巫术和宗教活动联系在一起的，舜作“韶”、禹作“大夏”、武王作“大武”，“乐”被孔夫子列为“六艺”之一 。后来，音乐从宗教中渐渐脱离出来，成为一种独立的艺术。 以小提琴为例，当它的A弦振动时，并不仅仅是整根弦在振动，这根弦的二分之一、三分之一、四分之一、五分之一……处都在振动着。于是，整根弦的振动产生了最主要的频率，我们称之为基音，而弦长的二分之一、三分之一、四分之一等处的振动则产生了一些次要的频率，我们称之为泛音。 如果一个物体振动所发出的泛音为基音的整数倍，这个音就会具有清晰可辨的音高，我们称之为乐音，如钢琴，小提琴等发出的都是乐音；如果泛音是基音的非整数倍，这个音就不具备清晰可辨的音高，我们称之为噪音，如汽车发动机、计算机风扇等发出的都是噪音。 音乐的四要素 音高：由基音的频率决定。即“哆”“唻”“咪”等音符。 响度：由声波的振幅决定。 音色：由基音与泛音的比例、泛音