7.1.3多媒体信息处理的关键技术-计算机应用基础-[共2页].pdf

4．实时性

实时性是指当多种媒体集成时，需要考虑时间特性、存取数据的速度、解压缩的速度以

及最终播放速度的实时处理。

7.1.3多媒体信息处理的关键技术275

1．数据压缩与编码技术

通常听到的声音、看到的景物都可以称为模拟信号，即连续量信号，因此，早期的多媒

体技术和系统基本上采用模拟方式。但模拟方式表示的声音或图像信号在复制和传送的过程

中，容易丢失或产生噪声和误差，更不能用数字计算机进行加工处理。目前，声音和图像的

采样、生成、存储、处理、显示、传输和通信都普遍使用了数字化技术，但是数字化的视频章７第

和音频信号的数据非常大，比如，一幅352像素×240像素（pixel）的近似真彩色图像

（15bit/pixel）在数字化后的数据量为352×240pixel×15bit/pixel=1267200bit。在动态视频中，

采用NTSC[（美国）国家电视标准委员会]制式的帧率为30帧/s，那么要求视频信息的传输率础基体媒多

为1267200bit×30帧/s=（3.8016E+07）bit/s。因此，在一张容量为700MB的光盘上全部存

放视频信息，最多所存储的动态视频数字信号所能播放的时间最长也只有=193.077s，即3.218

分钟。由此可知，不采用压缩技术，一张700MB光盘存放动态视频数字信号只能播放3.218

分钟。以计算机的150kbit/s传输率，在没压缩的前提下，是无法处理（3.8016E+07）bit/s的

大数据量的。如果采用MPEG-1标准的压缩比50∶1，则700MB的VCD光盘，在同时存放

视频和音频信号的情况下，其最长可播放时间能达到96分钟。因此高速实时地压缩音频和视

频等信号的数据是多媒体系统必须处理的关键问题，否则多媒体技术难以推广和应用。

数字化的多媒体信息能够被压缩，主要有两方面的原因。

（1）原始视频信号与音频信号数据存在很多冗余的地方。如视频图像帧内相邻像素之间

的空域相关性和帧与帧之间的时域相关性非常大。

（2）人类对视觉和听觉具有不灵敏性。人的视觉对于图像的边缘急剧变化不敏感，耳朵

很难分辨出强音中的弱音，因此，可以在一定的范围内实现高压缩比，使压缩后的声音数据

和图像数据经过还原后仍然能得到满意的效果。

2．多媒体信息的检索

实现用户对多媒体信息的有效检索是多媒体关键技术之一。多媒体信息检索主要分为两

种方式：一种是基于多媒体外部特征的检索，主要通过元数据实现；另一种是基于多媒体信

息内容的组织方式，主要依赖于内容的检索技术。下面具体介绍。

（1）数字图像技术。在图像、文字和声音这三种形式的媒体中，图像所包含的信息量是

最大的。人们的知识绝大部分是通过视觉获得的。图像的特点是只能通过人的视觉感受，并

且非常依赖于人的视觉器官。数字图像技术就是对图像进行计算机处理，使其更适合人眼或

仪器的分辨，并拾取其中的信息。

数字图像处理的过程包括输入、处理和输出。输入即图像采集和数字化，就是对模拟图

像信号进行抽样、量化处理后得到数字图像信号，并将其存储到计算机中以待进一步处理。

处理是按一定的要求对数字图像进行诸如滤波、锐化、复原、重现、矫正等一系列处理，以

提取图像中的主要信息。输出则是将处理后的数字图像通过显示、打印等方式表现出来。

（2）数字音频技术。多媒体技术中的数字音频技术包括声音采集及回放技术、声音识别

技术和声音合成技术，这三个方面的技术在计算机的硬件上都是通过“声卡”实现的。声卡