信息组织与检索 第五章-多媒体数据内容描述模型.ppt

* * 5.6 MPEG-7简介 一、什么是MPEG-7 MPEG-7的目标就是产生一种描述多媒体内容数据的标准，满足实时、非实时以及推-拉应用的需求。 MPEG-7不针对特定的应用领域，而是支持尽可能广泛的应用领域。 1996年10月，MPEG开始了一项新的工作 “多媒体内容描述接口”(Multimedia Content Description Interface)，简称为MPEG-7 * * 5.6 MPEG-7简介 一、什么是MPEG-7 MPEG-1、MPEG-2和MPEG-4是内容本身的表示，而MPEG-7是有关内容的信息(是比特的比特)。 MPEG-7将规范一组“描述子”，用于描述各种多媒体信息。 带有MPEG-7数据的视听（AV）资料可以包含静止图象、图形、3D模型、音频、语音、视频，以及这些元素如何在多媒体表现中组合的信息 * * 5.6 MPEG-7简介 二、MPEG-7中的主要概念 数据 数据(Data)是利用MPEG-7描述的视听资料，不考虑它们的存储、编码、显示、传输、媒介或技术 图形、静止图象、视频、影片、音乐、语音、声音、文本和其它相关的AV媒体 特征 数据的独特性质 例如：图像的颜色、语音的声调、音频的旋律、镜头的运动、视频的风格、影片的名称、影片中的角色等都是多媒体数据的特征 * * 5.6 MPEG-7简介 二、MPEG-7中的主要概念 描述子D (Descriptor) 是特征的表示。描述子定义特征表示的语法和语义。 描述子可以赋予描述值。 可能一个特征有多个描述子。 例如颜色特征，可能的描述子有：颜色直方图、频率分量的平均值、颜色矩等。 * * 5.6 MPEG-7简介 二、MPEG-7中的主要概念 描述子值 是描述子的实例 描述模式DS(Description Scheme)说明 其成员之间的关系结构和语义。 它的成员可以是描述子和描述模式。 DS和D的区别是：D仅仅包含基本的数据类型，不引用其它D或DS。 例如对于影片，时间结构化为场景和镜头（描述模式DS），在场景级包括一些文本描述子，在镜头级包含颜色、运动和一些音频描述子。 * * 5.6 MPEG-7简介 二、MPEG-7中的主要概念 描述(Description) 由一个描述模式DS(结构)和一组描述子值组成 编码的描述(Coded Description) 是已经经过编码的描述，满足诸如压缩效率、差错恢复和随机存取的相关要求 * * 5.6 MPEG-7简介 二、MPEG-7中的主要概念 描述定义语言DDL(Description Definition Language) 是一种允许产生新的描述模式和描述子的语言 就象元数据和SGML元数据中的文档定义语言DTD 允许扩展和修改现有的描述机制。 * * 5.6 MPEG-7简介 三、MPEG-7的范围 特征提取 标准的描述 搜索引擎 MPEG-7的范围 * * 5.7 小结 多媒体内容中包含丰富的信息线索，是信息检索的对象 本章介绍与信息检索技术紧密相关的多媒体内容模型 如果用属性来表述多媒体内容的性质，那么多媒体内容具有两个方面的属性：一般属性和视听属性，它们描述了多媒体的全内容 对于多媒体信息的描述，重要的是标准化。这就是MPEG-7 * HyTime:超媒体/时基结构化语言HyTime（Hypermedia/Time-based structuring Language） RDF:资源描述框架RDF MML:数学置标语言MML（Mathematical Markup Language）。 SMIL:同步多媒体集成语言SMIL（Synchronized Multimedia Integration Language）。 TOC * * 第5章 多媒体数据内容描述模型 多媒体信息检索系统的数据建模： 数据类型的复杂结构 表达多媒体的特征内容 本章主要介绍第二方面的模型 即多媒体的内容描述模型 * * 第5章 本章内容 5.1 什么是多媒体内容 5.2 多媒体内容的一般模型 5.3 图像内容描述 5.4 视频内容描述 5.5 音频内容描述 5.6 MPEG-7简介 5.7 小结 * * 5.1 什么是多媒体内容 “内容”（content） 表示包含和含义 是本质而区别于形式 是构成概念的性质、想法和观念元素的集合。 表示包含在多媒体数据中的特性、含义和信息线索，而区别于其外部和一般性的属性。 * * 5.1 什么是多媒体内容 “内容”的层次 概念级内容。表达对象的语义。 感知特性。视觉特性，例如颜色、纹理、形状、轮廓、运动等； 听觉特性。例如音高、音色、音质等。 逻辑关系。视频音频对象的时间和