利用相似性比较进行视频镜头检测的方法.pdfVIP

维普资讯 第29卷 第2期 河 北 理 工 学 院 学 报 I，0f．29 No．2 2007年5月 JournalofHebeiInstituteofTechnology Mav．2007 文章编号：1007-2829(2007)02-0075-06 利用相似性比较进行视频镜头检测的方法 叶 军 ，汪 娥 ，李建良 ． (1．南京邮电大学应用数理学院，江苏 南京210003；2．南京农业大学 经济管理学院． 江苏 南京 210095；3．南京理工大学理学院，江苏 南京 210094) 关键词：镜头边界检测；小波变换；分块直方图；图像相似 摘 要：随着多媒体技术的发展，大量的视频数据涌现。但由于视频数据是非结构性的数据。 故而，为了便于视频的检索和浏览，必须对视频进行分段，将镜头作为分段的基本单元是比较 合适的。通过改变两帧图像的分块相似度的定义对镜头进行突变检测 。然后利用小波变换对 分块图像进行多尺度分解，以提取图像的边缘特征；最后结合这两种特征，对镜头进行渐变检 测，数值试验表明，所利用的方法对各种类型的视频能够很好的检测出其中的突变型镜头和渐 变型镜头。 ． 中图分类号：TP334．1 文献标识码：A 0 引言 随着多媒体存储压缩技术和计算机网络的发展，数字视频越来越广泛的存在于人们的生活空间中，视频 点播、数字图书馆等视频服务也开始走进人们的生活中。但由于视频信息数据量极大，抽象程度很低，且视 频数据并不是一种结构性的数据…，其本身并没有能够用做索引和浏览的基本单元，使得对视频进行检索 和浏览极为困难。因此，有必要对这些数字视频进行有效的组织和管理才能很好地对其进行分析和利 用[2】。目前，一般认为视频分为视频序列、场景、镜头和帧4级结构，而其中镜头比较合适作为索引和浏览的 基本单元 引。 - 由于视频数据是有连续的图像组成的，不便于直接管理和检索，因此需要将其分割成相对独立的视频片 断。由于视频一半是由多段镜头拼接而成，镜头内部各帧图像是连续变化的，而 目前的基于内容的视频检索 系统中，一般都是先将视频分割成独立的镜头，然后对每个镜头选取关键帧来表示该镜头视频的特征提取、 运动分析和检索等过程也都可以在关键帧上完成。可见，镜头边界检测是基于内容的视频检索中十分重要 的问题 [2】。视频序列中镜头检测与分割的好坏将直接影响视频检索的进一步应用，这里我们对原有的分块 直方图度量两帧图像的相似度方法进行了改进，并以分块直方图为特征，引入小波多尺度分析两帧图像的纹 理相似度来进一步对镜头进行突变和渐变检测。 1 镜头分割的一般算法 视频是由一段段的镜头串接而成的，这种镜头串接按特性可以分为突变和渐变两大类。突变类镜头串， 是前一个镜头在时间上刚刚结束，后一个镜头就马上开始，其特点是过渡时间为零，前后两个镜头在内容上 不发生任何交叠；渐变类镜头串，是前一个镜头的尾部和后一个镜头的头部存在着内容的交叠，常见的渐变 过渡有：淡人淡出、隐现、翻页、拉进、滑人、弹人弹出、上拉下拉、翻转、旋转等…。对于镜头边界检测国内外 学者已经有了许多的成果 I5】。其相同的原理是基于镜头转换时视频数据会发生一系列的变化这一规律进 行镜头边界检测，即通过比较前后两帧图像之间的差异来实现镜头的边界检测和识别。 收稿 日期：2006--06-23 基金项 目：江苏省 自然科学基金 BK2004137 维普资讯 76 河 北 理 工 学 院 学 报 第29卷 在视频镜头分割方面，已经