第07讲 视频处理技术Ilgl.ppt

第07讲 视频处理技术I(主教材 3.4，4.8，5.3节） 3.4 视频处理 4.8 视频编码 5.3 视频编码标准H.26X 3.4 视频处理 3.4.1 视频信号的获取 3.4.2 视频信号的编码 3.4.3 视频信号的传输 3.4.4 视频信号的运动分析 3.4.5 三维视频处理与显示 3.4.1 视频信号的获取 视频可分为模拟视频和数字视频。 1.模拟视频 普通的广播电视信号是一种典型的模拟视频信号。电视摄像机通过电子扫描将时间、空间函数所描述的景物进行光电转换后，得到单一的时间函数的电信号，其电平的高低对应于景物亮度的大小，即用一个电信号来表征景物。这种电视信号称为模拟电视信号，其特点是信号在时间和幅度上都是连续变化的。 对模拟电视信号进行处理的视频技术（如校正、调制、滤波、录制、编辑、合成等）称为模拟视频技术。 3.4.1 视频信号的获取 在电视接收机中，通过显示器进行光电转换，产生为人眼所接受的模拟信号的光图像。 模拟电视系统通常用光栅扫描方式。光栅扫描是指在一定的时间间隔内电子束以从左到右、从上到下的方式扫描感光表面。若时间间隔为一帧图像的时间，则获得的是一场图像；在电视系统中，两场图像为一帧。扫描方式常有逐行扫描和隔行扫描。 (1) 逐行扫描 逐行扫描如图3.10所示。在图（a）中，实线为行扫描正程，电子束从左到右扫描过的轨迹；虚线是行扫描逆程，电子束从右到左扫过的轨迹。行扫描周期为电子束从左到右扫描完一行正程所需的时间加上从右返到左所需的轨迹。 (2) 隔行扫描 隔行扫描如图3.11所示。在隔行扫描，一幅图像由奇数场（场正程）和偶数场（场逆程）组成。场扫描周期为场扫描正程时间加上逆程时间。采用隔行 采用隔行扫描的目的是为了压缩光电转换后所产生的视频信号的频带。 (3)光栅特性 (3) 光栅特性 光栅扫描的基本参数是帧频和每帧扫描行数，它们分别对应于光栅扫描的时间分辨率和空间垂直分辨率。视频就是由许许多多相隔Δt的帧组成的。根据人眼视觉惰性，低于一定阈值的帧频会使人眼感觉到图像动作的跳跃和闪烁，所以提高帧频能有效地改善画面的连续性和稳定性。每帧扫描行越多，图像就越清晰。 2.数字视频 模拟视频信号经过数字化处理后，就变成了一帧帧由数字图像组成的图像序列，即数字视频信号，它用二进制数字表示，是计算机能够处理的数字信号。每帧图像由N行、每行M个像素组成，即每帧图像共有M×N个像素。 与模拟视频相比，数字视频有许多优点： （1）适合于网络应用 在网络环境中，视频信息可以很方便地实现资源的共享 和可以长距离传输，而模拟信号在传输过程中会有信号损失 。 （2）再现性好 数字视频可以不失真地进行无限次拷贝，抗干扰能力强，模拟信号由于是连续变化的复制容易失真。 （3）便于计算机编辑处理 模拟信号只能简单调整亮度、对比度和颤色，而数字视频信号可以传送到计算机内进行存储、处理，很容易进行创造性地编辑与合成，并进行动态交互。 数字视频的缺陷：数字视频的缺陷是处理速度慢，所需的数据存储空间大，数字图像的处理成本增高。通过对数字视频的压缩，这样可以节省大量的存储空间。光盘技术的应用也使得大量视频信息的存储成为可能。 3.4.2 视频信号的编码 数字视频的数据量非常大。视频压缩编码无论在视频通信还是视频存储中都具有极其重要的意义。视频编码的目的就是在确保视频质量的前提下，尽可能地减少视频序列的数据量，以便更经济地在给定的信道上传输实时视频信息或者在给定的存储容量中存放更多的视频图像。视频编码可分为第一代视频编码方法和第二代视频编码方法。 第一代视频编码方法主要有预测编码、变换编码和基于块的混合编码等。 第二代视频编码也称为基于内容的编码方法，主要采用分析合成编码、基于知识的编码、模式编码和语义编码等。 视频压缩基础 3.4.3 视频信号的传输 视频信号的传输是多媒体信息传输的核心。视频通信有两种基本的传输模式：单点传输模式和多点传输方式。 单点传输模式需要对等的通信方式，又称为为一对一方式。一般将这种对等（peer-to-peer）通信称为单播。 多点传送是一对多或一对全部的方式，也称为广播方式（broadcast）或组播。 根据服务方式不同，视频流业务可以分为直播和点播。 3.4.3 视频信号的传输 点播是将编码后的视频流存储起来，编码在离线的状态下进行，而直播则需要编码器实时地对视频信息进行编码。 视频传输通常要求实时，对时延十分敏感。 此外，视频传输涉及传输比特率、吞吐量、延迟等一些重要的网络性能参数。 3.4.4 视频信号的运动分析 运动分析与估计是数字视频处理的基本内容，也是视频处理研究的热点与难点 。 研究内容主要是测量计算机