第三章音频信号与数字化.pptVIP

第3章 音频、视频信号及数字化 3.1 音频信号及数字化 3.1.1 音频信号及其心理特征  3、波表合成 (Wave Table Synthesize) 由于FM算法的局限性，无法描绘千变万化细致入微 的真实乐器，音质自然只能类似于普通玩具电子琴 的效果。波表合成利用已录制好的声音样本合成相 应声音。 具体操作是用PCM波形(Wave，就是常听到 的游戏中的爆破、人声等效果音) 格式 对足够多的 乐器波形逐一采下样本排列成一个表格(Wave Table)。回放MIDI格式记录的音乐，也就是常见的 *.mid等格式文件时，从波形表中分别查到所需乐 器 对应的波形数据，再按照演奏需要的音符高低调 整频率等相关数据后重放出来。 从理论上说，这种 合成方式得到的MIDI回放效果与真实乐器一样。波 表合成可以用硬件或软件方式实现。 A、硬件波表合成 硬件合成是将波表合成引擎以硬件的形式做在声卡 上，有些声卡还将音色数据保存在卡上的专用RAM芯 片中或是在系统内存中划分区段存放。 如创新 (Creative) 的AWE32/64、SB PCI 128、SB Live! 和帝盟(Diamond)的MX300等声卡。硬件波表 的优点 是系统资源占用小、音色信噪比(SNR)高，能实时回 放MIDI音乐。 B、软件波表合成 软件方式波表合成是用软件利用系统CPU的运 算功能完成合成运算过程， 然后通过声卡的 Wave合成引擎发出声音。 声音卡处理的音频媒体有数字化声音（Wave）、合 成音乐（MIDI）、CD音频。 声音是怎样工作的？ 2、3、2音频卡主要具有的作用； B、编辑:对数字音频文件进行剪切、复制、粘贴、 混合、删除等处理； 2、对数字音频文件进行压缩和解压缩 ４、各音频源的混合； 音频卡的结构与性能 1、数字信号处理器（DSP Digital Signal Processor） 　处理和控制所有音频卡的系统指令，是音频卡各 种功能模块工作的控制中心。 MIDI的特点： 1、与波形声音相比，MIDI不是声音数据而是指令，所以数据量 要少得多。30分钟的音乐，用MIDI文件记录只需200KB，用 16位CD品质的未压缩WAV文件记录需317MB； 2、MIDI可以与其他波形声音配合使用，形成伴乐的效果。而两 个波形声音一般是不能同时使用； 3、对MIDI的编辑也很灵活，用户可以自由地改变音调、音色 等属性，直到自己想要的效果； 4、MIDI在音质上还不能与真正的乐器完全相似。无法模拟自然 界中其它非乐曲类声音； 2、3音 频 卡 音频卡也称为声卡，是多媒体信息系统中处理声音 信息的基本设备,它集输入与输出功能为一体,是工 作在系统与声源设备和回放设备之间的传输系统; 2、3、1声卡的定义； 声卡处理的对象是什么？ 从模拟到数字 声源 声波 传声器 模拟电信号 数字声音 1、采集、编辑和回放数字声音文件 CD光盘驱动器 线路输入 麦克风 计算机PC A/D转换 A、采集 C、回放: 不同的音频卡以及相应的控制软件在采集、编辑和回放 数字声音文件时所采用的文件格式可能不同，但他们之 间可以相互转换； 声卡支持的压缩标准主要有: 1、ADPCM（自适应差分脉冲编码调制） 2、ACM（音频压缩管理器） 3、MIDI音乐合成 1、合成或创作MIDI音乐； 2、可以输入或者输出MIDI文件； 数字化波形声音、合成器产生的声音、CD音频； ５、语音识别与合成 文本 语音 语音 计算机指令 文本 合成 识别 总　　线 数据总线 地址总线 控制总线 总线接口 和控制器 游戏接口 DSP MIDI接口 混合信号处理器 MIDI音乐合成器 Line输入 CD输入 Speaker Mic A、数字信号处理器 B、混合信号处理器 C、MIDI音乐合成器 D、多种信号放大器 E、总线接口控制器 F、各种接口模块 DSP芯片主要作用: 1、处理和控制所有通往音频卡的系统指令； 4、ASP（高级数字信号处理器） a、立体声、语音识别、解压缩功能； b、高质量的音效； c、通过编程加入特殊效果等； 2、处理所有的音频的输入/输出和MIDI操作； 3、用PCM，DPCM，ADPCM进行编码和压缩，进行 文件的存储和输出； 采样周期 两次采样的时间间隔大小叫做采样周期, 用Ts表示 2. 采样频率 单位时间内的采样次数.用fs表示. 第3章 音视频信号及数字化