基于内容视频检索的关键技术研究.pdfVIP

2OO5年 1O月 第 1O期 基于 内容视频检索的关键技术研究 黄知义 周 宁 (武汉大学信息管理学院，武汉430072) (摘 要】 从分析基于内容的视频检索系统的基本结构和原理出发，文章重点探讨了基于内容视频检索的一些 关键性技术，如：镜头分割、关键帧抽取、特征量提取、视额索引建立等的实现原理及其各 自的优缺点，并对国内外 视额检索的发展现状及发展趋势提出了一些看法。 关【键词】 视频检索；关键技术；镜头分割；关键帧抽取；特征提取 ~Abstrm) Ⅲli8paperstartedfzomtalkiIlgaboutthesystemstructureand pleofc~ent-basedvideo陀． trieva1．ThenitmaiIdyh~ uceditBfourkeytechniques：SceneIncision，KeyFrameExtraction，FeatureExtraction andConsturctionofVideoIndexandSOon．Atlast，theauthorbroughtforwantseveralviewpointsonthestatusquoand developinguendofvideoretrieva1． K【eywords) VideoRetrieva]；l(eyTechniques；SceneIncision；KeyFrameExtraction；FeatureExtraction [中图分类号] 91．3 [文献标识码]c [文章编号]1008—0821(2005)10—0126—04 1 引 言 个镜头是由一些连续的帧构成，它可由一个或多个关键帧 近年来，随着多媒体编码、计算机多媒体处理和网络 表示。一段视频的典型结构如图l所示。 传输技术的飞速发展，人们 已可通过互联网实时查询、欣 赏和产生丰富多彩的视频信息。互联网正逐渐成为一个巨 大的视频仓库。如何有效地组织和检索视频信息已成为数 据库领域以及信息检索领域中研究的关键性问题。传统的 基于文本的视频检索方法利用文本信息对视频内容进行注 释，通过对关键字进行抽取来描述视频内容的语义特征。 但由于目前的技术还不能对视频内容的语义特征进行 自动 描述，仍需使用手工的方法对视频进行解释和注释。这是 图1 典型视频结构图 工 一 项耗时的工作 ，而且由于主观上的因素，可能造成注释 基于内容视频检索 ，首先要实现的是对视频数据的分 作 的不准确性 ，因此，基于文本的检索方法已不能满足需求。 析处理，基于内容的视频分析 ，即从所有的帧中提取主要 研 基于内容的视频检索 (Content—BasedVideoRetrieva1)。 内容，并从下至上对视频内容进行结构化描述。为了实现 究 根据视频的内容和上下文关系，对大规模视频数据库中的 这个 目标 ，我们需对视频进行如下处理 ：视频切分、关键 视频数据进行检索。它在没有人工参与的情况下，自动提 帧抽取、特征提取和视频内容组织等。 取并描述视频的特征和内容。它以图像处理、模式识别、 图2描述了基于内容的视频处理的主要过程。视频首 计算机视觉、图像理解等领域的知识为基础，从认知科学、 先被分割成各个镜头，并实现对各个镜头的特征提取，得 人工智能、数据库管理系统及人机交互、信息检索等领域， 到一个尽可能充分反映镜头内