[工学]第一章+数字视频基础.ppt

视频信号取样 理想取样: 取样脉冲 是周期为 的单位冲激序列 ，即： * 视频信号取样 取样频率的选取对信号恢复的影响 * 视频信号取样 二维取样 二维取样定理：若二维连续信号 的空间频率 和 分别限制在 、 ，则只要取样周期 、 满足 和 ，就可以由取样信号无失真地恢复原信号。 取样函数 * 视频信号取样 取样失真 混叠失真 如果取样周期 和 不满足 和 ，即欠取样，则相邻周期的频谱将会发生重叠，恢复信号时就会产生混叠失真。 孔径失真 取样脉冲存在一定的脉冲宽度，丧失某些高频成分，导致信号恢复产生误差和模糊。 抑制混叠失真 其他噪声 插入噪声、抖动噪声等 * 图像量化 取样后所得到的信号在时间-空间上是离散的，但在幅度上仍然是连续的 量化：将无限级的信号幅度变换成有限级的数码表示 量化器：按照一定规则对取样信号的幅度值作近似表示?有限离散值 量化误差，量化失真（噪声） * 图像量化 量化的用途 模拟信号数字化---模数转换 数据压缩 量化的分类 无记忆 vs 有记忆 均匀 vs 非均匀 对称 vs 非对称 标量量化 vs 矢量量化 标量量化：对每个取样点独立地进行量化 矢量量化：对k个取样点所组成的一组（一个矢量）进行量化 * 图像量化 标量量化 … … f fmin fmax Q(f) fmin fmax … … 为判决电平 为量化电平 * 图像量化 量化失真测度 均方误差 绝对值误差 加权绝对值误差 均方误差（量化误差） * 图像量化 均匀量化 一种标量量化器，也称为线性量化器 量化间隔相等，即： 量化电平对应于电平区间 的中值，即： 设 f 的概率密度函数为均匀分布 量化误差为： 量化层数L越大，则量化误差越小。但编码所需比特数也越大 * 提纲 人类视觉系统 彩色模型 视频 多维随机信号分析 数字化 质量评价 视频模型 * 数字视频质量评价 主观评价 平均判分方法 三种类型：质量测试、损伤测试、比较测试 * -2：坏得多 1：不能用 E：劣 -1:坏 2：很讨厌 D：次 0：相同 3：有点讨厌 C：中 +1：好 4：刚能察觉，不讨厌 B：良 +2：好得多 5：不能察觉 A：优 比较测试 损伤测试 质量测试 数字视频质量评价 客观评价 均方误差(MSE) 峰值信噪比(PSNR) 平均绝对误差 对每个彩色分量通常取255---8bit 40dB，非常好 30~40dB，比较好 20~30dB，相当差 20dB, 不能接受 * 提纲 人类视觉系统 彩色模型 视频 多维随机信号分析 数字化 质量评价 视频模型 * 视频模型 场景模型 用于描述包括光源、物体、摄像机的世界，运动物体与摄像机之间的相互定位。 照明模型 摄像机模型 物体模型 * 照明模型 描述照明变化引起的视频信号在时间上的变化。 分类 光谱模型 多种彩色光源 几何模型 环境光源（无阴影）、点光源 局部照明模型 光源与物体位置无关 总体照明模型 考虑物体间的影响（如阴影） * 照明模型 光源 照明光源 太阳、灯泡等 相加规则 反射光源 色彩感觉取决于入射光的光谱成分和被吸收的波长范围 相减规则 镜面反射 只显示入射光的颜色 漫反射 可显示物体表面的颜色 * 照明模型 反射光辐射强度 反射系数 入射光光强 L：照明方向 V：观测方向 N：表面法线矢量 P：物体表面位置 ：光的波长 固定L和V： 环境光源、漫反射： 点光源、局部照明模型、漫反射： ：入射光方向L与任意点P处表面法线N之间的夹角 * 摄像机模型 描述真实场景中物体在摄像机成像图像平面上的投影 实现四维空间到三维空间的映射 透视投影 正交投影 摄像机运动 三维空间（世界）坐标系 二维投影图像平面坐标系 * 摄像机模型 透视投影 也称中心投影：以摄像机为中心 满足 或 O：观察点 O’：投影平面原点 OO’=F：焦距 * 摄像机模型 正交投影 也称平行投影：物体距离摄像机很远 满足 * 摄像机模型 摄像机运动 平移：跟（track）、吊（boom）、推（dolly） 旋转：摇（pan）、倾（tilt）、滚（roll） 变焦 * 摄像机模型 摄像机运动 跟和吊：沿X轴和Y轴的平移 对于透视投影： * 摄像机模型 摄像机运动 摇和倾：绕X轴和Y轴旋转 当旋转角 和 均很小时： * 摄像机模型 摄像机运动 变焦：改变摄像机的焦距 滚：绕Z轴旋转 其中： 很小 * 物体模型 关于真实物