基于镜头鲁棒视频广告检测.pdfVIP

基于镜头的鲁棒的视频广告检测 张亮，朱振峰，赵耀 北京交通大学计算机与信息技术学院信息科学研究所，北京（100044 ） E-mail ：zhangliangwin@ 摘 要：随着多媒体技术的发展，自动检测出数字视频节目里面嵌入的广告是很具挑战性的研 究。然而，由于嵌入的广告的制作方式和表现手法的多样性，很多自动检测模型的实验结果往 往不甚理想。为了提高检测系统的鲁棒性，本文提出了三阶段广告检测系统。首先，本文提出 了基于区域特征重要性的镜头检测算法（RBFID, Region-based Feature Importance Detection ）， 实现视频播放中突变镜头和消隐镜头的检测, 同时从每个镜头提取出一些统计特征用来标识镜 头。然后，利用SVM 的优异分类特性实现镜头分类。最后为了能得到精确的广告视频段，本文 利用广告视频在内容和时间上的连续性来消除错分的镜头，然后将广告镜头整合成广告视频段。 本系统在30 个电视节目的片段上进行验证，实验结果表明此广告检测系统的实用性。 关键词：视频广告检测，镜头检测，支持向量机 特征，然后利用这些特征将电视镜头分成普 0. 介绍 通节目镜头和广告镜头。但是这些方法通常 随着多媒体技术的发展，电视广告在日 只是简单的分类，而没有考虑如何消除错分 常生活中扮演着日益重要的角色。广告自动 广告镜头的影响，同时也没有考虑如何合并 检测系统以及相关技术的发展带来主要包括 广告镜头得到广告片段的问题。而且，现有 两个方面的应用。一方面，对普通电视节目 的很多方法都没有考虑广告内容的一致性， 感兴趣的人可以在视频节目里快速的定位广 从而很难改善检测的效果。另外，上述方法 告并去除广告，从而可以提高视频节目的存 即使在检测切变镜头方面得到很好的效果， 储效率。另一方面，对于广告感兴趣的人可 但当检测消隐镜头或者淡入淡出镜头时就会 以利用自动检测系统快速获得广告片段，从 遇到问题。除了上述的检测方法，基于数据 而可以节省他们分析广告制作技巧的时间。 库的广告检测方法也被采用[6]，数据库存储 为了实现上述的应用，人们提出了很多的广 预先定义的广告视频段的特征，然后利用此 告检测策略。早期的研究通常集中在基于台 数据库识别嵌入在电视节目里面的广告段。 标的检测[1，2]和black/silent 帧的检测[3] 。 然而，此方法的缺点是必需一个足够大的数 然而，由于现在的电视台在播放广告的时候 据库来存储已知的广告特征，因此不能检测 通常不隐去台标，导致基于台标的检测方法 出数据库中预先不存在的广告视频段。 失败，并且现在的台标也变得越来越复杂， 检测起来十分不易。另外，在普通节目片段 和广告片段转换时不总是存在black/silent 帧， 甚至 black/silent 帧也可以为了某种剪辑需要 随机的插入，这直接导致基于black/silent 帧 检测方法的失败。为了避免上述问题，人们 又提出了基于镜头的检测方法[4，5]。此方法 通过从镜头中提取一些能够表示广告片段的 1 本课题得到国家自然科学基、教育部博士点专项基金(20030004016) 和新世纪优秀人才支持计划的 资助。 -1-