多媒体系统期末复习.pptxVIP

多媒体计算机技术基础及应用主讲: 张桦　每周三上午第3,4节 教12-414第1章 多媒体计算机技术概述本章重点介绍多媒体计算机技术定义多媒体计算机的分类多媒体计算机的关键技术1、多媒体计算机技术定义 计算机综合处理多种媒体信息(文本、图形、图像、音频、动画和视频)，使多种信息建立逻辑连接，集成为一个系统并具有交互性。简单地说： 计算机综合处理声、文、图多种信息；具有集成性和交互性；2、多媒体计算机的分类 从开发和生产厂商以及应用的角度出发可以分成两大类： 电视计算机（ Teleputer ） 计算机电视（ Compuvision ） 3、多媒体计算机的关键技术 要把一台普通的计算机变成多媒体计算机要解决的关键技术是：视频音频信号获取技术；多媒体数据压缩编码和解码技术；视频音频数据的实时处理技术；视频音频数据的输出技术。4、多媒体计算机技术的发展趋势进一步完善计算机支持的协同工作环境智能多媒体技术把多媒体信息实时处理和压缩编码算法内嵌到CPU芯片中第2章 视频信息的获取、 处理和显示技术2.1 彩色空间表示及其转换2.2 视频信息获取技术2.3 视频信号的实时处理2.4 图像文件格式及其转换1、一幅图像颜色的表示一幅图像f（x，y）其分辨率为 512?512f(x0,y511)f(x0,y0)f(x511,y0)f(x511,y511)x0Xf ( x0 , y0 )y0 位图f ( x , y )YX Y的离散化称为采样f（x，y）值的离散化称为量化什么叫位图呢？将画面中的每一点的颜色都以二进制数字形式存储为数字矩阵中的一个元素。数字矩阵中的元素称为像素；数字化的矩阵放在显示缓冲区中，与显示器上的点一一对应，这就是位图图像。位图图像也称为“栅格图像”，将一幅位图图像放大到一定程度，就会发现它是由小方格（图像网格）组成，这些小方格就是像素。位图图像采样和量化 多媒体计算机处理图像和视频，首先必须把连续的图像函数f (x,y) 进行空间和幅值的离散化处理。采样和量化采样：空间连续坐标(x,y)的离散化，叫做采样；量化：f(x,y)颜色的离散化，称之为量化。数字化：两种离散化结合在一起，叫做数字化. 离散化的结果称为数字图像。视频图像的表示PAL制25帧/秒NTSC制30帧/秒图像是二维数据视频是三维数据BGR2、以一幅彩色静态图像(RGB)为例：设分辨率为720?576每一种颜色用8bit表示R用8bit 256级别表示G用8bit 256级别表示B用8bit 256级别表示则一幅彩色静态图像的数据量为：720?576 ?3 ?8 bit=10Mbit3、PAL 制式25帧/秒 NTSC 制式30帧/秒以PAL制25帧/秒为例，视频每秒钟的数据量720?576 ?3 ?8?25=250Mbps3.彩色空间RGB 彩色空间YUV 彩色空间YIQ 彩色空间HIS 彩色空间 ？RGB888转YUV444？RGB888转YUV420？ Y 0.3 0.59 0.11 R U = -0.15 -0.29 0.44 G V 0.61 -0.52 -0.096 B第三章 音频信息处理3.1 数字音频基础3.2 音频卡的工作原理3.3 音频编码基础和标准3.4 音乐合成和MIDI3.5 语音识别1、音频的数字化 计算机内的音频必须是数字形式的，因此必须把模拟音频信号转换成有限个数字表示的离散序列，即实现音频数字化。在这一处理技术中，涉及到音频的采样、量化和编码。 　2、采样：音频实际上是连续信号，或称连续时间函数x(t)。用计算机处理这些信号时，必须先对连续信号采样，即按一定的时间间隔T取值, 得到x(nT)(n为整数)。 ----T称采样周期 ----1/T称为采样频率如何确定T？T或者fs与信号频率相关快速变化的信号必须采用更高的采样频率采样必须符合乃圭斯特（Nyquist）定理 fs2fm(fm是信号的最大频率)语音：fs=8kHz, 音乐：fs=44kHz 采样定理:设连续信号x(t)的最大频率为fm，以采样频率fs采样得到离散信号x(nT), 如果满足： fs =1/T=2 fm那可由x(nT)完全确定连续信号x(t) 当采样频率等于2 fm时, 即fs0 =2 fm,称fs0为奈圭斯特频率。 最高频率的地方必须有两个采样点　3、量化：为了把采样序列x(nT)存入计算机，将样值量化成一个有限个幅度值的集合。通常，用二进制数字表示量化后的样值KQ ----Q称量化阶距如何确定Q？与信号幅度的范围和感知灵敏度相关Q和信号幅度范围D决定了R b/采样点2R=D/Q语音：R=8