基于尺度不变特征的视频镜头检测 - 模式识别国家重点实验室 - 中国 .pdf

维普资讯 第 19卷 第 9期 计算机辅助设计与图形学学报 Vo1．19．No．9 2007年 9月 JOURNALOFCOMPUTER—AIDEDDESIGN COMPUTERGRAPHICS Sep．，2007 基于尺度不变特征的视频镜头检测 万崇玮 李炜明 李和平 胡占义 (中国科学院 自动化研究所模式识别 国家重点实验室 北京 100080) (cwwan@nlpr．ia．ac．en) 摘 要 通过分析帧间的尺度不变特征点匹配数 目随时间变化的性质来检测镜头边界 ，并提 出2种帧间匹配机 制——两两匹配机制和连续匹配机制．一个视频镜头 内的特征点匹配数 目具有平滑变化 的特性，而在镜头边界处则 表现出陡然变化的特性．通过将各类型的镜头切换统一于一种检测模式，可清晰地分割 出镜头，避免模型选择和参 数调整． 关键词 视频镜头检测 ；尺度不变特征 ；特征点匹配 ；高斯混合模型 中图法分类号 TP391 VideoShotDetectionBasedonScaleInvariantFeatures W anChongwei LiW eiming LiHeping HuZhanyi (NationalLaboratoryofPatternRecognition，InstituteofAutomation，ChineseAcademyofSciences，Beijing 100080) Abstract Shotboundariesweredetectedbyanalyzingtemporalevolutionofthenumberofmatchedscale invariantfeaturesacrossframes，andtwodifferentmeasureschemeswereproposed，namelypair—wisebased matchingandchainmatching．Thenumberofmatchedpointswithinashotusually variessmoothly，but changesrathermarkedlyacrossshotboundaries．Allkindsofshottransitionsaredetectedwithinthesame scheme，withtheadvantageofavoidingmodelselectionandparameteradjustment． Keywords shotdetection；scaleinvariantfeature；featurematching；Gaussianmixturemodel 随着数字视频 的使用越来越广泛，自动视频 内 致渐变较突变更难检测．另外 ，一些摄像机 的运动 容分析技术的需求也越来越大．在大部分视频 内容 或场景 中物体的运动使视频产生 了与渐变相似的变 分析技术 中，包括索引、镜头分类 、浏览、检索等 ，视 化 ，所 以镜头检测时还需要将这类运动区分出来． 频镜头的边界检测都是最基本的环节之一． 迄今为止 ，已经 出现了很多 自动视频镜头检测 “镜头”一般定义为摄像机在一次连续操作期间 的方法 。也有文献对它们进行了系统 的比较_10j．早 拍摄所得到的帧序列．由于一个镜头内所有图像描 期的方法主要针对突变检测 ，而近期 的工作大部分 述的通常是一致 的内容 ，因此我们可 以假设一个镜 都是针对渐变检测．Koprinska等_1提出了一种较为 头内相邻帧之间存在很大的相似性．镜头切换有 2 全面的分类方法 ，将 已存在的视频镜头检测技术分 类基本的方式 ：突变和渐变_1j．突变方式 比较简单 ， 为以下几类 ：基于像素差的方法 、基于统计量 的方 只是将一个镜头的末帧与下一个镜头的首帧直接相 法 、基于灰度或颜色直方图的方法