视频处理与宽带通信2分析报告.pptVIP

人眼平滑追踪 人眼自动移动追踪所观察物体 根据前面的结果： 人眼不能分辨超过80Hz的时间频率 前提：假设人眼不动 人眼平滑追踪 所观察物体的相对运动变小了 因此，人眼实际能观察到更高的时间频率，如在行驶中的火车中看到外面的大树 人眼运动速度为 视网膜坐标下 与显示屏幕上的 有如下关系： 由傅立叶变换可得 物体运动速度为 人眼平滑追踪 这意味着视网膜上的观测频率 与显示屏幕上的频率 的关系如下： 我们已经学过，线性运动物体有 当 时，有 人眼平滑追踪 人眼平滑追踪可使人眼察觉高达1000Hz的时间频率 由下图可知，平滑追踪的效果是把视觉响应中非零区域扩展到较大时间频率范围 这是玩游戏比看电影要求的刷新率高的主要原因之一 人眼平滑追踪 无人眼平滑跟踪 在2度/秒的跟踪速度下 在10度/秒的跟踪速度下 人眼平滑追踪 谢 谢！ * * * * * 多媒体包含视频，图像，声音，文本等多种数据，但是视频和图像是多媒体信息中不可或缺的重要组成部分。 * * The light field is a function that describes the amount of light traveling in every direction through every point in space. * * * * * * * * * 左下，在水平方向上灰度值每单位长度变化5个周期，而在垂直方向上保持恒定。 右上，在垂直方向上灰度值每单位长度变花10个周期，而在水平方向上保持恒定。 左上图是二者的合成，即在水平方向上灰度值每单位长度变化5个周期，在垂直方向上灰度值每单位长度变化10个周期。 * * 空间频率越大，角频率越大； 观察距离越远，角频率越大。 这同我们的直觉匹配得很好：同样的图像在远处看要比凑近看显得变化快些；同样的距离看屏幕，显示分辨率越高，图像显得变化快些。 通常在研究HVS性质时，我们用角频率来表示空间频率。 * 尽管上面讨论的只是物体的线性运动，而且物体频率单一（也就是二维正弦图像），对于包含较复杂景物的视频，多个物体又以不同方式运动时，我们可以用分割图像区域、图像作用时间和分解物体频率的方法，将问题分解成单一频率物体在一定区域内，一定时间范围内作线性运动的简单问题。当然这可以帮助我们研究视频的频率响应，但更普遍地，我们还是要利用人类视觉系统和主观经验来研究。在下一节中，我们将介绍与此相关的内容。 * * * 迄今为止，色度学和视觉生理、心理学方面的研究成果表明，人类视觉系统远不如人们想象得那样完美，视频信源给出的所有信息并非都能为人类视觉系统所正确接收，且不同的视频信息对视觉系统的作用也是不一样的。 利用人类视觉系统的特点，除去人眼无法感知的信息，降低人眼不敏感的信息需保留的数据量，这就能更好地提高编码效率，并尽可能地保持原来的主观质量。 * 以下，我们首先描述HVS的空间和时间频率响应。然后我们介绍联合时-空频率响应。最后，我们描述在人眼跟踪移动对象时如何转换视觉频率响应。 * 图中点A和点B的绝对灰度值是一样的。 * 人眼视觉惰性原理，即当人眼观看一个物体时，同时在人脑中形成一个对应的物像，该物体突然消失，人脑中的物像并不会同时消失，仍然有一段时间的滞留。若有一组画面内容相关的图像，以一定的速度播放，当播放速度大于15帧/秒时，人眼视觉分辨不出这种高速变化，而感觉看到的是一组连续动作画面。动画就是由这样一组组不同数量的图像组成。 是现代电影、电视的理论基础。 * 通过看该图，我们可以直观感受到视觉惰性的存在，似乎图上交叉位置闪现很多黑点，但实际一个都没有，人眼所误观察到的黑点正是由于周围黑色区域颜色暂留造成的。 * * 上图直观显示边缘增强效果。 * * 图 示 重要结论 当fx=fy=0时，不论 vx,vy何值，都有ft=0, 表明在对象具有完全无变化的图案，如整个平面就一种颜色时，则无论对象沿时间平面运动有多快，人眼都观察不到在时间上的改变 如果运动方向(vx,vy)与空间频率方向(fx, fy)是互相垂直的，则时间频率ft=0。沿着空间频率方向ft变化速度最快。沿着空间频率方向(fx,fy)的垂直方向则无空间变化。表明一个对象在其图案不变化的方向上运动不产生任何时间频率上的改变。 时间频率最大的是当对象在空间频率改变最大的方向上运动时 提 纲 视频处理基础概念 一 颜色空间 二 视频信号的频域特性 三 HVS系统 四 人类视觉系统 任何视频系统从根本上说是给人看的。因此，理解人类视觉系统（ Human Visual System，简称HVS）如何感知视频信号是极其重要的 HVS对视觉信号的敏感度依赖