数字图书馆中基于内容的视频检索关键技术.pdfVIP

中国图书馆学报 (双月刊)2003年第 2期 0NGGU0 TUSHUGUANXUEBAO ●何立民 万跃华 数字图书馆 中基于 内容的视频检索关键技术 摘 要 实现数字图书馆中基于内容的视频检索的关键技术包括 ：视频数据建模 、视频分割、视 频索引、视频查询与浏览 。有待深人研究的问题有 ：算法的引进、视频的检索反馈 等。图 l。参 考文献 21。 关■词 数字 图书馆 基于内容的视频检索 多媒体信息检索 分类号 G250．76 A188IRACT Keytechniquesfortherealizationofcontent—basedvideoretrievalindigitallibrary in— cludevideodatamodel~ ，videosegmentation，videoindexing，andvideosearcKngandbrowsing． Problemstobesolvedincludetheimprovementofalgorithms，thefeedbackofvideoretrieval，etc．1 魄 ．21reds． Ⅺ WORi~ Di西tallibrary． Content．basedvideoretrieva1． Multimediainformatkmretrieva1． CLASSNUM 墟R G25O．76 如何有效地组织、管理和检索大规模的视频数 要进行基于 内容 的视频检索 ，首先要建立一个 字图书馆，是海量信息处理的瓶颈 ，已成为国内外研 合理的视频数据模型。 究热点。而基于 内容的检索技术便是解决这一问题 视频数据 由于其本身的综合性 (包含声、视 内容 的关键技术之一 [1]。 及高级语义内容)、结构的复杂性 (非格式化)及具有 时空多维结构 ，要用一个恰当的数据模型把现实世 1 数字圈书馆中基于内窖的视频检索关t技术 界的视频反映到信息世界及机器世界，问题十分复 基于内容的视频检索 (Content-BasedVideoRe． 杂。传统的数据库模型(如关系模型)无法直接应用 tae~ )，是一种新的检索技术。它能从数据库 中查找 于视频数据库，即使作某些改进补充 ，也难 以适应视 到具有指定特征或含有特定 内容 的图像 (包括视频 频数据这类复杂的数据类型。 片段)。它区别于传统的基于关键字的检索手段 ，融 合了图像处理、模式识别、计算机视觉、图像理解等 技术 ，具有如下特点：(1)直接从视频数据 中提取信 息线索 。(2)它是一种近似匹配，与常规数据库检索 的精确匹配方法 明显不 同。(3)自动提取并描述视 频的特征和 内容 。如 图 1所示 ，首先要构造视频结 构 ，将视频序列分割为镜头 ，并在镜头 内选择关键 帧，这是实现一个高效的基于 内容 的视频检索系统 的基础和关键 。然后提取镜头的特征 以及关键帧的 视觉特征 ，作为一种检索机制存入视频数据库。最 后根据用户提交的查询按照一定的特征进行视频检 索 ，将检索结果按相似程度提交给用户。特征 的提 圈1 基于内窖的祝频检素系统框榘 取和检索算法的优劣决定了整个检索系统的效率和 传统的视频数据模型只反映空间信息的表达式 性能。基于内容视频检索技术已经在数字 图书馆 中 上增加时间因素 2【--4]。这类模 型并没有反映视频数 得到广泛应用。实现数字图书馆基于 内容 的视频检 据的一些主要特征如空间特征及视频语义 内容 ，也 索技术的主要关键技术包括以下几个方面。 没有反映视频原始素材 的共享及视频数据 的独立 1．1 税囊建摸 性 。但它们 的一些重要概念 (如时态区间、区间关系 一