多媒体信号处理 课件 第1章 多媒体信息处理基础.pptx

1.1多媒体的基本概念

1.2音d频信息处理基础

1.3图像信息处理基;1.1.1媒体的概念

1.1.2多媒体与多媒体技术

;1.媒体（medium）

按传统的说法，媒体指的是信息的载体，如：

报纸、杂志、电视、广播、因特网…

在计算机领域有两种含义：

信息的存储实体，如磁盘、光盘、磁带、半导体存储器等，中文常译为媒质或媒介；

传递信息的基本元素，如文字、声音、图形、动画和图像等。;2.媒体的分类

国际电话电报咨询委员会（CCITT）把媒体分成如下5类。

（1）感知媒体（PerceptionMedium）

感知媒体就是指能直接作用于人的感觉器官，使人直接产生感觉（视、听、嗅、味、触觉）的一类媒体，如语言、音乐、图形、动画、数据、文字、文件等都是感知媒体。

（2）表示媒体（RepresentationMedium）

表示媒体是为了更有效地加工、处理和传输感知媒体而人为研究和构造出来的一种媒体。它包括上述感知媒体的各种编码，诸如语言编码、静止和活动图像编码，以及文本编码等。

;（3）呈现媒体（PresentationMedium）

呈现媒体是感知媒体与用于通信的电信号之间在转换中用于信息输入和输出的媒体。可分为输入呈现媒体（如键盘、摄像机、话筒、扫描仪等）和输出呈现媒体（如显示器、扬声器、打印机等）两种。

（4）存储媒体（StorageMedium）

存储媒体用于存储表示媒体，即存放感知媒体数字化后的代码的媒体称为存储媒体，如磁盘、光盘、磁带、半导体存储器等。

（5）传输媒体（TransmissionMedium）

传输媒体是指用来将表示媒体从一处传递到另一处的物理传输介质，如同轴电缆、双绞线、光纤及其他通信信道。

;在多媒体技术中所说的媒体一般指感知媒体。常见的感知媒体包括：

（1）视觉媒体：图像、图形、符号、视频、动画等。

（2）听觉媒体：声音、语音、音乐和音响。

（3）触觉媒体：通过直接或间接与人体接触，使人能感觉到对象的位置、大小、方向、方位、质地等性质。

;1．多媒体

关于多媒体（Multimedium）的定义或说法多种多样，从不同的角度出发对多媒体给出了不同的描述，目前仍没有统一的标准。通常所说的多媒体就是各种媒体的综合，也就是声音、图??、动画、视频、文本等各种媒体的综合。“多媒体”常被当作“多媒体技术”的同义词。

2．多媒体技术

多媒体技术就是利用计算机技术把文本、图像、图形、动画、音频及视频等多种媒体有机地集成起来，使人们能以更加自然的方式使用信息，并与计算机进行交互，且使表现的信息图、文、声并茂。简言之，多媒体技术就是计算机综合处理声、文、图信息的技术，具有集成性、实时性和交互性。

;1.2.1声音的基本特性

1.2.2声音的主观感觉

1.2.3音频信号的数字化

;声音是机械振动或气流振动引起周围传播媒质（气体、液体、固体等）发生波动的现象，通常将产生声音的发声体称为声源。当声源产生振动时，引起邻近空气的振动。这样空气就随着声源体所振动幅度的不同，而产生密或稀的振动，空气的这种振动被称为声波。声波可以用一条连续的曲线来表示，它可以分解成一系列正弦波的线性叠加。;1.频率

单位时间内信号振动的次数，单位是赫兹（Hz）。声音的音调由频率决定。

声音尖细表示频率高，

声音低粗表示频率低。;2.频谱

声音信号按频率成分组成来分，可分为：

纯音：频率单一、振幅随时间按正弦函数规律变化的声音

复音：由不同频率和不同振幅的声波组合而成的声音

基音：复音中频率最低的成分（分音）

谐音：复音中频率与基音成整数倍的分音

声音的频谱结构是用基音、谐音数目、各谐音振幅大小及相位关系来描述的。声音的音色就是由其频谱成分决定的。;

声压

由声波引起的交变压强称为声压，一般用P表示，单位是帕（Pa）。

声压的大小反映了声音振动的强弱，同时也决定了声波的幅度大小。

声压级

用声压的相对大小（称声压级或声强）来表示声压的强弱。声压级用符号SPL表示，单位是分贝（dB）：

式中，P为声压有效值；Pref为参考声压，一般取Pa，这个数值是人耳所能听到的1kHz声音的最低声压，低于这一声压，人耳就无法觉察出声波的存在了。;人对声音的感知有响度、音调和音色三个主观听感要素。

响度：与声波振动的幅度有关

音调：取决于声波的基音频率

音色：由声波的的频谱成分决定

;1.响度：是人耳对声音强弱的主观感觉程度。;2.响度级：人耳对声音强弱的主观感觉还可以用响度级来表示。响度级的单位为方（phon）。规定1kHz纯音声压级的分贝数定义为响度级的数值。;3.听阈与痛阈;4.音调;声音信号是典型的连续信号，不仅在