ch3-视频信息的获取与处理.pptVIP

多媒体技术基础 申煜湘 湖南大学软件学院 rj_syx@hnu.cn 2010.02.27 第三章 视频信息的获取与处理 第三章的内容 视觉媒体：图像与视频 彩色空间表示及其转换：颜色的本质、特性，彩色空间及其转换 视频：模拟视频/电视信号、数字视频、视频的数字化 视频的编码标准 视频卡 图像文件格式 常用软件 第一节 视觉媒体 人类获取的信息中来自听觉的只有10%左右，但至少有70%来自视觉。 利用视觉传递信息的媒体称为视觉媒体，如文字和符号、位图、矢量图形、视频、动画等。 本章主要介绍位图和视频。 1.1 位图 位图是由n×m个像素点排列成的图片，也称点阵图像或光栅图像。 一幅位图就像是一个矩阵，矩阵中的每一个元素对应图片中的一个点，相应的值表示该点的灰度或颜色等级。 像素是赋予颜色和亮度的最小单位。 位图适用于逼真照片或要求精细细节的图片。 分辨率 有两个分辨率的概念，需要区分： 显示分辨率（设备分辨率）：屏幕在横纵两个方向上能够显示的像素数，如800×600。 图像分辨率：一幅图像在横纵两个方向上的像素数，是像素密度的度量方法。 像素深度 位图矩阵中，每个元素的值就是对应像素点的颜色/灰度值。 每个像素点所用的存储位数就称为像素深度。 像素深度决定了灰度图像中每个像素可能有的灰度级数，或者彩色图像中每个像素可能有的颜色数。 单色图 如果位图的像素深度只有1位，则该位图内的像素只能用0或1表示，即要么绘制，要么不绘制，这类位图就是单色图。 通常的单色图表现出来只有黑、白两色，也称黑白图。 灰度图 在黑白两种颜色的基础上添加亮度信息，形成具有黑白灰的灰度图。 灰色有深浅之分，最深为黑，最浅为白，其数目就是灰度等级。 如8位灰度图，灰度级数为256。 彩色图 使用不同灰度的红绿蓝三色，可以调配出各种颜色。 如24位彩色图，用8位表示红，8位表示绿，8位表示蓝。 思考 从信号处理的角度出发，表示位图的信号是模拟信号还是数字信号？ 1.2 模拟图像 思考：声音是时间和响度上连续的信号，那么照片之类的模拟静止图像呢？其连续性主要指哪些方面的连续？ 模拟图像的数字化 模拟的静止图像可以经过数字化变成数字图像。 和音频的数字化一样，图像的数字化过程也分成：采样、量化/编码。 采样和量化过程使得在空间和颜色值上都连续的图像变成离散图像。 由于图像的数据量也很大，一般也要进行压缩编码。 采样 对图像进行采样即在空间上离散化。 设f(x,y)是连续的模拟彩色图像函数，如下采样： 沿x方向以等间隔Δx采样，采样点数为N； 沿y方向以等间隔Δy采样，采样点数为M。 得到一个N*M的离散样本阵列[f(n,m)]，这就是一幅空间上离散化了的图像。 采样频率 和音频一样，为了尽量减少失真，使得能从采样后的数据中还原出原数据，对图像采样时也应满足采样定理对采样频率的要求（f采≥2fmax）。 图像的采样频率：即采样密度，由间隔Δx与Δy决定。 图像信号的频率：即图像颜色值/亮度的变化频率。 量化 1.3 视频 视频：由一幅幅单独的画面序列组成，这些画面以一定的速率依次显示，使观察者具有图像连续运动的感觉。 从数学的角度看，视频是随时间变化的图像，或称为时变图像、运动图像、活动图像。 视频是携带的信息量最为丰富、直观、生动、具体的一种媒体。 视频信号的特点和分类 视频信号具有以下的特点： 内容随时间而变化； 伴随有与画面动作同步的声音(伴音)。 视频信号可分成： 模拟视频 数字视频 第二节 彩色空间表示及其转换 颜色是人脑对物体的一种反映，是人的一种感觉。 研究颜色时，将涉及到物理学、生物学、心理学和材料学等多门学科。 2.1 光与颜色 颜色是视觉系统对可见光的感知结果，所感知到的颜色由光波的频率/波长决定。 可见光是指波长在380nm~780nm之间的电磁波。 人们看到的大多数光是由许多不同波长的光组合成的。 牛顿的三棱镜试验证明，白光包括了所有可见光谱的波长。 视觉系统 眼睛的成像原理与照相机一样，光线照射在物体上，经过反射后射入眼睛，通过眼球后在视网膜上成像。 视网膜通过神经元来感知外部世界的颜色，神经元分成两大类： 锥体细胞：又可以分成三种，分别对红/绿/蓝有着不同的敏感度。 杆状体细胞：在光功率极低的条件下才起作用，对颜色不敏感。 三种锥体细胞的光谱敏感示意图 视觉对波长、亮度的感知度 辐射功率相同但波长不同的光，给人的亮度感觉不相同。 在同一亮度环境中，辐射功率相同的条件下，波长等于555nm的黄绿光对人的亮度觉最大，并令其亮度感觉灵敏度为1。 三基色原理 自然界中常见的各种颜色光，都可以由红(R)、绿(G)、蓝(B)这三种颜色光按不同比例混合而成，这就是色度学中最基本的原理——三基色原理。 实际上，也可以选择另外三种颜色