《多媒体计算机技术基础及应用》（第3版）教学课件 6.3.1.pptVIP

6.3.1 基于内容检索的系统结构 现有的许多多媒体数据库系统只提 供基本媒体的描述、关键字一类的检索 和查询，但很多的应用要求数据库系统 能对图像或声音等媒体进行内容语义分 析，已达到更深的检索层次。因而有必 要讨论多媒体数据库基于内容的检索与 查询方法。 1. 目标标识：为用户提供一种全自动或半自动(需要用户干预)标识静态图象，视频镜头的代表帧等用户感兴趣的内容区域，以及视频序列的动态目标，以便对目标进行特征提取及查询。 如果进行整体内容检索，可以采用全局特征。这时不用目标识别功能。 2. 特征提取 对多媒体数据进行特征提取，提取用户感兴趣、适合于检索要求的特征。 3. 数据库 生成的数据库由媒体库(集)，特征 库(文件)和知识库组成。 媒体库：多媒体数据 图象、视频、 音频、文本。 特征库：用户输入的特征和预处理自 动提取的内容特征。 知识库：知识表达。 4. 查询接口 由于特征值是高维向量，它具有直观性。 有三种可视化手段：操纵交互输入 方式、 模板选择输入方式及用户提交样 板输入方式。 多种特征组合、查询结果的浏览功 能。 5.检索引擎 检索是利用特征之间的距离函数， 进行相似性检索，得到认知排队。对 于不同的媒体有不同的相似形测度算法。 6.索引/过滤器 索引引擎通过索引/过滤器达到快速 搜索的目的。 全部数据 过滤器 新的集 高维特征匹配检索 (1).提交查询要求， 交互式输入方式 或启用上述的查询接口 模板选择输入方式 特征样板输入方式 (2). 相似性匹配 将查询的特征与数据库中的特征按照 一定的匹配算法进行匹配。 (3). 返回候选结果 满足一定相似性的一组候选结果， 按照相似度大小排列返回给用户。 (4). 特征调整 a. 用户浏览一组初始特征查询结果选 择满意的结果。 b. 也可以从候选结果选择一个示例， 进行特征调整。最后形成一个新的 查询，如此逐步缩小查询范围，直 到用户对查询结果满意为止。 * * 一 、 基 于 内 容 检 索 的 体 系 结 构 6 超媒体浏览器系统、会议系统、多 媒体信息系统、关系数据库系统 用户的查询说明 示例 一般性描述 相似性匹配 返回一组候选结果 满意？ 结束 修改查询说明 从候选结果中 选择一个示例 Y N 特 征 调 整 , 重 新 匹 配 的 处 理 过 程 二、基于内容检索的处理过程