4数字视频基础解析.ppt

数字视频表示 每帧图像由N行、每行M个像素组成 每秒连续播放30帧以上，就能有较好的连续运动景物的感觉 每个像素Nb个比特，则传输速率 M?N ? fp ? Nb 数字视频特点及应用 优点：便于传输与交换，便于多媒体通信，便于存储、处理和加密，无噪声积累，差错可控制，可通过压缩编码来减低数码率，便于设备的小型化，信噪比高，稳定可靠，交互能力强 数字视频标准 多维信号与系统 二维 二维离散傅里叶变换 随机图像 平稳随机图像通过线性移不变系统 模拟视频数字化模型 摄像机获得外部景物为一个连续的时变图像信号f(x,y,?,t)（模拟视频信号），为获得数字序列图像信号（数字视频），需要进行时-空取样和量化 对连续时变图像f(x,y,?,t)在y方向(列)和时间t上进行二维取样(即扫描)，得到x方向(行)的一维时间函数的模拟视频信号 对该模拟信号在水平方向x上沿行扫描线取样，得到离散化的三维时-空数字视频信号 对离散化的三维时-空数字视频信号进行量化编码，从而可得到数字化的视频信号 模拟视频信号在时空上的离散化称为取样 一维取样 二维取样 视频质量 逼真度 被评价视频图像与原标准视频图像的误差程度 可懂度 视频图像向人或机器提供信息的能力 视频质量评价 主观评价 客观评价 最具权威性的评价方法 通过人在给定的观察条件下观察视频图像，对视频图像的优劣做主观评定，对评分进行统计平均所得出的评价结果。 与观察者的个性和观察条件等因素有关 通常采用平均判分（MOS）方法 质量测试 损伤测试 比较测试 5：不能察觉 A：优 +2：好得多 4：刚能察觉，不讨厌 B：良 +1：好 3：有点讨厌 C：中 0：相同 2：很讨厌 D：次 -1：坏 1：不能用 E：劣 -2：坏的多 主观测试5级标准 均方误差（MSE） 原视频图像序列f1(m,n,k)与处理后的视频图像序列f2(m,n,k)之间的均方误差 K—视频图像序列帧数 M?N—帧图像的大小 KMN—视频图像序列的总像素数 对于彩色视频，每个彩色分量的MSE是分别计算的 峰值信噪比（PSNR） fmax为视频信号的峰值，每个彩色分量通常取 fmax =255 通常PSNR高于40dB的亮度分量，则视频图像非常好（与原始视频图像很接近），30~40dB为比较好（即失真可察觉，但可以接受），20~30dB为相当差，低于20dB是不可接受的 平均绝对误差（MAD） 减少计算量 视频是一个三维信号，具有两个空间维（水平和垂直所构成的图像平面）和一个时间维 场景模型 描述运动物体与一个三维场景的摄像机如何相互定位 二维场景模型通常假定物体与摄像机的成像平面平行运动 三维场景模型更有效的描述真实世界，可根据照明模型、摄像机模型和物体模型得到 照明模型 摄像机模型 物体模型 主要用于描述照明变化引起的视频信号在时间上的变化 光谱模型 适用于多种彩色光源或由不同彩色物体反射的间接光源 几何模型 适用于环境光源（照射物体时不会产生阴影）和点光源（例如聚光灯） 对每一种类型光源，分为 局部照明模型 假定照明光源与物体的位置无关 总体照明模型 需要考虑物体间的影响（例阴影） 光源 照明光源：遵循相加原则 反射光源：遵循相减原则 生理混色法 若左右两眼分别观察不同的颜色，则人眼感觉到的彩色不是两种单色光，而是这两种颜色的混合色 应用：立体彩色电视机 全反射混色法 将三种基色光以不同比例同时投射到一块反射表面，三种基色光产生全反射而相加混色形成混合色 应用：投影电视（包括背投） ● RGB —— 红、绿、蓝 R G B R G B 色度学 是研究彩色视觉（心理量）和光谱特性（物理量）的学科 包括： CIE-RGB彩色模型 XYZ彩色模型 CIE-RGB彩色模型 XYZ彩色模型 RGB彩色显示模型 ● RGB —— 红、绿、蓝 R G B ● CMYK 青、品红、黄、黑 C K M Y CMYK彩色显示模型 RGB彩色显示模型 NTSC：Y= 0.299R + 0.587G + 0.114B PAL：Y= 0.222R + 0.707G + 0.071B RCIE