06-多媒体数据库系统.ppt

目前多媒体数据库的研究主要途径 在现有商用数据库管理系统的基础上增加接口，以满足多媒体应用的需要； 建立基于一种或几种应用的专用多媒体信息管理系统； 从数据模型入手，研究全新的通用多媒体数据库管理系统。 第一种途径实用，但是效率很低；第二种途径易于实现，但缺乏通用性，而且可扩展性差；第三种途径是研究和发展的主流，但是具有相当的难度。 超媒体型多媒体数据库结构 基于内容检索 什么是基于内容的检索 所谓基于内容检索，就是从媒体数据中提取出特定 的信息线索，然后根据这些线索从大量存储在数据库中的媒 体中进行查找，检索出具有相似特征的媒体数据出来。 多媒体的内容处理 多媒体数据的“内容”表示多媒体信息的含义、要旨、主题、包含和显著的性质、实质性的东西、物理细节等，而多媒体内容处理技术要基于对内容的基本定义。 多媒体内容概念 多媒体数据的内容概念包括多个层次： 1、概念级内容：对象的语义表达。例如利用文本的描述，通过分类和目录来组织层次浏览，用链来组织上下文关联。 2、感知特性：视觉特性。如颜色、视觉对象、纹理、草图、形状、体积、空间关系、轮廓、运动、变形等，听觉特性如音调、音色、音质等。 3、逻辑关系：音视频对象的时间和空间关系，语义和上下文关联等。 4、信号特性：通过信号处理方法获取的媒体特征。 5、特指特征：与应用相关的媒体特征。如人的体形特征、面部特征、指纹特征等。 信息获取的依据主要是基于内容的“概念”，通常是通过“概念”来提交查询。实现“概念”查询的一种基本方式是基于文本式的描述，例如用关键词、关键词逻辑组合或自然语言来表达查询的“概念”。 用户获取多媒体信息的方式 当词语难以表达内容特征时，就需要利用媒体呈现的视觉和听觉特性来查询，例如基于颜色、纹理特征或语音特征进行查询。容易使用的主要查询形式有示例方式和描绘方式。 （1）示例方式就是通过浏览选择示例，或通过扫描仪、摄像机、数字相机、话筒等设备在线输入图像或音频作为查询的样本。 （2）描绘方式可以是用笔勾勒或描绘检索意图。 多媒体内容处理技术 多媒体内容的处理可分为三大部分：内容获取、内容描述和内容操纵。首先要对原始媒体进行处理并提取内容，然后用标准形式描述所提取的内容，以支持各种内容的查询、检索、索引等内容的操纵。 内容获取(Populating) 是通过对各种内容的分析和处理而获得媒体内容的过程。多媒体数据的重要成分是空间和时间结构，首先必须分割出图像对象、视频的时间结构、运动对象，以及这些对象之间的关系，然后提取显著的区别特征和人的视觉、听觉感知特征来表示媒体和媒体对象的性质。 内容描述(Description) 针对获取的内容进行描述。为了支持数据管理的灵活性、数据资源的全球化和互操作性，描述必须基于一定的标准。MPEG-7标准被称为“多媒体内容描述接口”，主要采用描述子和描述模式来分别描述媒体的特性及其关系。 描述子是特征的表示法，一个描述子就是定义特征的语法和语义学。MPEG-7标准定义了一系列的描述结构、描述结构的语言、描述定义语言和多种编码描述方法。 内容操纵(Manipulating) 主要针对用户操作和应用。有许多名词和术语。 查询是面向用户的术语，多用于数据库操作、 检索是在索引支持下的快速信息获取方式、 搜索常用于Internet的搜索引擎、 摘要是适合于视频和音频等时基媒体的特殊操作、 浏览可以线性或非线性地存取结构化的内容、 过滤是与检索相反的一种信息存取方式。 基于内容检索的体系结构 基于内容检索系统结构，由特征分析子系统、特征提取子系统、数据库、查询接口、检索引擎和索引过滤等子系统组成，同时需要相应的知识辅助支持特定领域的内容处理。 特征分析 该子系统负责将需要入库的媒体进行分割或节段化，标识出需要的对象或内容关键点，以便有针对性的对目标进行特征提取。特征标识可通过用户输入或系统定义。 特征提取 对用户提供或系统标明的媒体对象进行特征提取处理。提取特征时需要知识处理模块的辅助，与标准化的知识定义直接有关。 数据库 数据库包含多媒体数据库和特征数据库，分别存放多媒体数据同对应的特征数据，它们彼此之间存在着一定的对应关系。特征库中包含了由用户输入的和预处理自动提取的特征数据，通过检索引擎组织与媒体类型相匹配的索引来达到快速搜索的目的。 查询接口 即人机交互界面，由于多媒体内容不具有直观性，查询基于示例方式。必须提供可视化手段，可采用交互操纵、摸板选择和样本输入三种方式提交查询依