计算机网络概述（北大）WENJI15-多媒体基础.pptxVIP

多媒体技术概述吴云芳北京大学信息科学技术学院wuyf_pku@sina.cn主要内容多媒体的基本概念多媒体的基本要素多媒体信息的数字化数据压缩技术音频信息处理图像信息处理视频信息处理什么是媒体？存储信息的实体： 如磁盘、光盘、磁带、U盘等传递信息的载体： 如数字、文字、声音、图形和图像等 多媒体技术中所指的媒体什么是多媒体？在计算机中，文字、声音、图形、图像、动画、视频等信息载体结合在一起，形成一个有机的整体，称之为“多媒体”。什么是多媒体技术？利用计算机把文本、图形、图像、音频和视频等多种媒体信息综合一体化，并对多种媒体信息进行获取、压缩编码、存储、编辑、加工处理、传输和展示的技术。多媒体技术是计算机技术、通信技术、文字处理技术、音频技术、视频技术等多种技术的有机结合。多媒体的基本要素文字(text)：最常用的媒体声音(sound)：指各种声音信号，包括语音、乐音、自然音等。图形(graphics)：矢量图形图像(image)：位图动画(animation)：计算机制作出来的连续静态图像的顺序播放。视频(video)：摄像机拍摄的自然场景画面的连续播放。信号的分类模拟信号 随时间连续变化的电信号。如人的话音信号。数字信号 离散变化的电信号，由二进制代码“0”和“1”组成的信号。为什么需要将模拟信号数字化？自然界中存在的图像、声音和视频都是连续的模拟信号，而计算机只能处理离散的数字信号。因此，需要首先对这些模拟信息进行数字化处理，将其转变为计算机能够识别的数字信号，以便进一步分析处理。 模拟信号的数字化在连续信号中每隔一定时间取一个值，时间离散化。把模拟信号的连续幅度变为有限数量的存在一定间隔的离散值，幅度离散化。按照一定的规则，将量化后的值用二进制数值来表示。采样量化编码音频信号数字化例示采样定律采样定律：采样频率要高于信号最高有效频率的两倍，就可以从采样信号中重构原始信号。话音的最高频率为4000Hz，则每秒至少采样8000次（例如电话采样）。人耳能感觉到的自然界声音最高频率是20kHz，所以计算机中常使用的采样频率为44.1kHz （CD 音质）。量化精度量化精度：表示一个采样样本值的二进制位数，位数越多，精度就越高。若用16个二进制位表示声音，可将声音强度分为65536级（CD音质），若用8位则仅能区分256级。多媒体信息处理的关键技术多媒体数据压缩技术大容量数据存储技术一般DVD：单面单层4.7G 新一代高清存储技术： 蓝光DVD 单面单层25G多媒体网络与通信技术 3G网络，4G网络多媒体数据库技术多媒体信息检索技术数据压缩技术数据压缩是对数据重新进行编码，以减少所需的存储空间。其逆过程称为解压缩，将压缩过的数据恢复还原。由于数字化声音、图像、视频的数据量非常庞大，使得计算机系统的时间和空间开销巨大，因此数据压缩是必须的。 e.g. 存储1秒钟的CD双声道立体声音乐，需要的存储空间与存储9万个汉字所需的空间相同。声音、图像、视频都有不同的压缩标准。数据压缩条件多媒体数据信息存在冗余：原始多媒体数据客观上存在大量冗余。e.g. 图片中大面积的蓝天人的感观具有不敏感性，多媒体数据主观上存在一些冗余。e.g. 人们听觉上对高低音不敏感数据压缩方法无损压缩：压缩后的数据经解压缩后可100%还原，不存在任何误差。 压缩比低，为 2:1 或 4:1。 例如：磁盘文件压缩 WinZip/WinRAR。有损压缩: 压缩后的数据经解压缩后与原始数 据存在一定误差。 压缩比高，可高达100:1 例如：图像、视频、音频数据的压缩。 数据压缩标准音频 MPEG:高保真声音的数据压缩标准 MPEG-1 audio layer3: 用于MP3，压缩比为12:1 GSM:数字移动通信标准图像 JPEG:静态数字图像压缩编码标准视频 MPEG:视频影像压缩标准 MPEG-1: 用于VCD MPEG-2: 用于DVD和高清晰度电视 多媒体文件格式与播放器格式：是指以何种算法对声音、图像、视频等进行压缩或解压缩。播放器：是指还原某种或多种特定格式的音频、视频文件的软件。音频信息处理音频信息数字化质量的三个指标：采样频率采样频率越高，丢失的信息就越少。量化精度量化精度越高，就能更加真实地体现声波振幅的变化。声道数一次采样所记录的声音波形的个数。e.g. mp3、CD等都是双声道立体声。音频文件的数据量v:音频文件的数据量 (字节)f:采样频率(Hz)b:量化等级(二进制位数)s:声道数(数值)t:时间(秒)8：将二进制位数转化为以字节为单位对于一个时长1分钟，频率44KHz、256级、2声道的CDA文件，需要存储空间的大小为??数模转换和模数转换用传统设备(如：话筒)采集的多媒体信号是模拟信号。计算机进行处理时，模拟信号必须转换为数字信