音频编码讲义.ppt

* 南京大学多媒体研究所 * 什么是MIDI 海阔天空 MIDI是乐器数字化接口(Musical Instrument Digital Interface)的缩写。所以说MIDI并不是一个实在的东西，而是一个国际通用的标准接口。通过它，各种MIDI设备都可以准确传送MIDI信息。 * 南京大学多媒体研究所 * 音乐的电子合成 音源：能模拟乐器生成各种不同音色音符的电子合成器。 音序器：把一首曲子所需的音色，节奏，音符等等按照一定的序列组织好让音源发声，它实际上是记录了音乐的一般要素，拍子，音高，节奏，音符时值等。MIDI文件的本质内容实际上就是音序内容。 输入设备：为了符合人们原有的音乐习惯，人们制造了各种基于传统乐器形式上的MIDI乐器，如MIDI键盘，MIDI吹管，MIDI吉它，MIDI小提琴等等，你可以按照演奏传统乐器的方式去演奏它们，然后你的演奏便通过MIDI接口被音序器接收并存储为音序内容。 * 南京大学多媒体研究所 * 电子乐器的组成 (演奏控制器) (接口) (音源，音乐合成器) 演奏控制器, 进行实时演奏，驱动音源发声，其类型有： 键盘控制器， 气息（呼吸）控制器， 弦乐演奏器等。 * 南京大学多媒体研究所 * 音源的分类 按照工作原理,音源可分2类： 调频合成器(FM), 1983 PCM波形合成器, 1991 * 南京大学多媒体研究所 * 数字调频（FM）音乐合成器 (A,Wm,I,Wc) 合成的音乐 音符声学参数 不同音色音符的 参数库 乐谱 (声音强度、音长) “声道―滤波器”模型 音素的 声学参数 语音音素 参数库 文本分析 合成的语音 韵律标注 发音标注 文本 发音标注 Y(t)=A*Sin(Wc*t+I*Sin(Wm*t)) * 南京大学多媒体研究所 * 波表合成器 波表的制作： 每种乐器的每个音符的数字化波形，选择若干周期，把它们组织成一张表(波表)，存放在ROM中。 低通滤波 采样、量化 加工处理 乐器演奏 波表 存储器 录音 波表的使用：合成音乐时根据乐器类型及音符等访问ROM，取出对应的波 形数据,修饰成所要求的音强和时长，进行播放。 波表 存储器 解码 播放 修饰 DAC 合成的音乐 2. MIDI(乐器数字接口) 规范 * * 南京大学多媒体研究所 * MIDI(乐器数字接口) 规范 MIDI是音乐的数字表示方法，包含音符、定时、乐器指派等，也是数字电子乐器互相连接、互相通信的标准。(1983) 内容包括： 设备的互连与通信协议； MIDI message(MIDI消息)的规范； MIDI 文件(SMF)的格式； MIDI 时间代码(MTC)，使音/视频设备与MIDI设备同步; MIDI Machine control(MMC),使录音设备与MIDI设备同步 MIDI Show control(MSC)；使舞台灯光设备与MIDI 设备同步。 * 南京大学多媒体研究所 * MIDI设备的接口 MIDI设备端口（5芯DIN插座，菊花链方式连接）： MIDI in (MIDI合成器通过MIDI in接收 MIDI 消息 ) MIDI out (演奏控制器通过MIDI out 输出MIDI消息 ) MIDI thru (MIDI合成器通过MIDI thru 转发MIDI消息 ) MIDI in MIDI in MIDI out MIDI thru 音频输出 电源 MIDI音源的后面板 To host * 南京大学多媒体研究所 * MIDI 设备的互连 (MIDI演奏器) (MIDI out) (MIDI音源，MIDI合成器) MIDI演奏器（ 又称MIDI 发送器，MIDI键盘） MIDI接收器（MIDI音源）接收MIDI message， 合成出乐曲的声音. MIDI message (MIDI in) * 南京大学多媒体研究所 * MIDI设备的通信规程 通信规程： 通用异步收发器( UART ) 1个起始位+8个数据位+1个停止位 串行通信，速率： 3125字节/秒 分析：每个音符需使用6字节表示，共16个通道，平均每个通道 每秒可 收发约 16个音符以上。 * 南京大学多媒体研究所 * MIDI合成器的特性 1 MIDI合成器相当于一个电子乐队，它划分成16个 Channel（通道），每个通道是1个逻辑合成器, 各个逻辑合成器可演奏不同的乐器和不同的乐谱。每个通道的volume, pan, reverb level及其它特性均可独立设置。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 ???? ???? ???? ???? ???? ???? ???? ???? ????