基于全图像的视频分段的方法的研究.pdfVIP

基于全图像的视频分段方法研究 胡宏斌张路周晓嵘周洞汝 武汉水利电力大学计算机科学0技术系430072 摘要：视频分段技术是未来信息t而述公路上基f内容{见频怕：索服务的基本和关键技术。本文介绍r廿前 几类视频分段方法的基本思想，并主要训论丁蕞于垒幽像的视频突变和渐变分段方法。 l概述 基于内容的多媒体数据检索是目前研究的热点之一。视频数据库管理系统是管理视频 数据集合并向用户提供基于内容的视频检索的数据库系统。所谓“基于内容”的检索与以 往基于整个视频文件的检索相对应，是基于视频数据局部且与内容相关的检索。这就需要 进行视频分析和分段。本文主要讨论采用全图像分析的方法对视频数据流中的各种镜头变 换进行自动分析和识别。 镜头变换是指一段连续视频图像序列变换到另一段连续视频图像序列，其中包括镜头 in／Fade 突变——镜头切换和渐变——淡入／淡出(Fade 它们都是由视频剪辑形成的。视频剪辑的变换效果有多种，镜头变换识别的盛基本任务之 一就是将这一类经过剪辑的视颁分饼为镜义。 目前的镜头变换识别方法呵以分为二J、类，即基丁解压的全图像序列的识别方法、直 接基于压缩视频的识别方法卿J毡7‘确定变换摸删的识别方法。 第一类方法是完全基Jj幽像处理技术的，其基本思想是对全解压缩的帧幽像序州通过 帧间比较的方法来识别镜头的突变神J渐变。运一类方法足视频分段技术中重要和基础的=cJ 法之一、其它类型的方法往往需要州到它的一些基本技术。本文将士要讨论这～类方法。 第二类方法则是直接利JI=|j压缩数据中的某些信息如DCT系数和运动矢量等进行分 段，可以人人减少视频分析和处理的计算昔。 前两娄方法属于自下而上(bottom．up)的方法，而基于确定变换模型的识别方法则 属于自上而下(top—doⅦn)的方法。它通过建立镜头变换的精确数学模型来帮助提高SCD 识别率和识别速度。其优点是可以建立一套基于数学模型的系统的方法，而且对于特定领 域(如新闻)的视频图像可以通过在数学模型上加上一定的限制条件来提高方法的有效性。 这一类方法的表现主要取决于它们所基于的数学模型。 2全图像镜头切换识别 切换是指当前幽像铍F一幅幽像快述代替，人的视觉上可以感觉到一个突然的变化． 同样在帧间差别比较上会出现一个尖峰(Peak)。冈此，镜头切换识别的基本原理是寻找较 好的帧间差别比较方法米抢出促峰，同时减少与奠它镜头变换方式的误识别。 2．1 模板匹配 模板匹配是指对两幅鲥像相同位置的像素灰应伯或颜色值进行比较，并计算备灰度筹 或颜色差的总和。当图像人小为N、×N，时，模扳匹配的公式如(1)所示： 1‘“业‘Nj d(，，，，，)= ∑ }』，(x，，)一』，(z，y)I (1) J；0P=O 模扳匹配的计算方注与像素的位置密切相关，因此，用这种方法进行图像差别的计算 对噪声和物体运动十分敏感。在镜头变换识别中，如果单纯采用模板匹配的方法，容易造 成误识别。 212 颜色盲方图匹配 若两幅图像l，和l，的直方豳为H，和H，，则颜色商方幽匹配的计算方法如公式(2)所示： ·492· d(j，，』，)=21／-／，(A)一Ⅳ，(k)1 (2) 石。 由于直方圈丢失了颜色的伉置信息．劂此两幅嘲像可能内容完全不同但直方幽相似。 所以，仅用简单的颜色直方幽匹配也可能造成误识别。一种改进的方法是将图像划分成若 干子块，分别对各子块进行匹配，废弃差别墁人的对，其余的比较结果参与最后的识别” 由于子块的位置固定，各f块的直方图一定群度上反映r颜色的位置特征，网此子块划分 与匹配的方法可以对物体运动、摄像机运动、镜头缩放等情况有更好的适应性。 2．3 x2直方图匹配 x2直方图匹配的计算公式如公式(3)所示： 弧，．)：争垡型二堡堂