数字视频技术第一章.pptVIP

教材及参考资料 教材及参考资料 视频应用 基于内容的图像检索 基于内容的图像检索 视频检索 视频跟踪 视频跟踪应用 视频跟踪应用 目标的检测与识别 视觉处理系统应用 图像与视频拼接 图像与视频拼接 图像与视频拼接 运动视频分析系统 运动视频分析系统 运动视频分析系统 图像与视频安全 §1.1.1 视频的基本概念 视频：动态图像，是一组图像按时间顺序的连续展示 §1.1.1 视频的基本概念 §1.1.2 扫描 黑白全电视信号=黑白图像信号＋（行、场）复合消隐信号＋（行、场）复合同步信号 §1.1.2 扫描 §1.1.2 扫描 同步脉冲叠加在消隐脉冲之上； 行同步脉冲前沿决定接收机行扫中行正程结束和行逆程开始； 行消隐前沿超前同步前沿一定时间，即存在一定宽度的行消隐脉冲前肩； 行同步脉宽为行周期的7.5%左右； 场同步脉宽为行周期的2-3倍。 §1.1.2 扫描 §1.1.2 扫描 §1.1.3 数字视频 广义的数字视频——是指依据人的视觉暂留特性，借助计算机或微处理器芯片的高速运算，加上Codec技术、传输存储技术等来实现的以比特流为特征的，能按照某种规律和标准在显示终端上再现活动影音的信息媒介； 狭义的数字视频——是指与具体媒体格式所对应的数字视频，如DV格式数字视频、DVD光盘格式数字视频、AVI桌面格式数字视频、RM流媒体格式数字视频、MP4固体存储数字视频等。 §1.1.3 数字视频 §1. 3.1 图像质量评价标准 缺陷： 观察者需经过培训，人力物力投入大，为时较长； 图像内容与情节千变万化，观察者个体差异大，人的视觉反应到主观感觉上有其心理因素，容易发生主观上的偏差； 主观评价无法进行实时监测； 仅仅只有平均分，如果评测分数低，无法准确判断问题的根源。 §1. 3.2 视频传输质量评估 在视频通信业务的实际应用中，无法完全保证端到端的视频传送质量，在通信和互联网应用中信源端和接收端对图像质量主要影响因素： 可用带宽：衡量用户从网络取得互联网视频应用数据的能力； 延时：延迟超出缓存能力时，会发生丢包，影响图像质量； 丢包：导致图像质量劣化的最根本原因； 码率波动：播放视频时接收端要求稳定码流，码率波动过大会导致解码器主动丢包以保证前后视频质量一致，引起质量下降。 §1. 3.2 视频传输质量评估 衡量多媒体通信业务的视频质量时，经常用以下标准评估接收视频主观视觉效果： 图像跳跃：由于网络拥塞造成丢包使图像帧间运动不平滑，有类似快进现象； 块效应：由于传输误码造成的，是所有基于DCT技术压缩都可能出现的现象； 模糊度：由于编码器为了适应固定码率而产生的，图像高频细节部分丢失造成图像边缘模糊； 噪声：由于采集和存储图像过程中，高频细节劣化产生的附加像素点。 §1. 4 数字视频的前沿技术问题 “图像压缩编码”和“数字视频的智能性” 正在制定和完善一个融合的H.264标准（具有更高的压缩比、更好的IP和无线网络信道适应性）； 数字视频智能性是指如何主动地将智能特性移到摄像机的前端，让摄像机本身可以确定如何采集影像，如何基于图像内容标记“它们”，事后如何检索；如何使摄像机不仅能够记录事件，还能评估事件的重要性与相关性。 一行黑白全电视信号示意图 12μS 64μS 52μS 4.7μS ｔ ｖ 0 消隐电平75 % 同步电平100% 　　白电平 正程图像信号 行消隐信号 行同步信号 （黑电平） 10～12.5 % 黑白全电视信号波形（以全白图像为例） 奇场开始 偶场结束 偶场开始 奇场结束 场消隐 1.6mS= 25行 偶场场同步 2.5行 前均衡 后均衡 2.5行 2.5行 625 3 1 2 5 4 624 623 621 622 22 23 7 6 313 24 25 311 312 314 309 310 315 316 317 318 319 320 335 336 337 338 奇场场同步 2.5行 2.5行 2.5行 前均衡 后均衡 32μS 64μS 4.7μS 12μS 4.7μS 64μS 64μS §1.1.3 数字视频 低通滤波器容许低频信号通过, 减弱(或减少)频率高于截止频率的信号的通过。 §1.1.3 数字视频 取样（采样） 将时间和幅度上连续的模拟信号转变为时间离散的信号，即时间离散化。 t t 幅度 取样频率至少是模拟信号最高频率的两倍。 一般选在2.5倍左右。 §1.1.3 数字视频 量化 将幅度连续信号转换为幅度离散的信号，即幅度离散化。 度量每一个取样值，归类于设定的量化电平中的一个电平。 量化电平越细，失真程度越低，数字化后的比特率越高。反之，相反。 一般来说，二进制方式，其量化比特为8的话，其量化电平数为28，即256个