《数字图像与视频处理》课件——第10章 基于内容的图像和视频检索.pptVIP

**纹理特征——Tamura纹理特征基于对纹理的视觉感知心理学研究，Tamura等人提出了纹理特征的表达方法。Tamura纹理特征的6个分量：粗糙度（coarseness）对比度（contrast）方向度（directionality）线像度（linelikeness）规整度（regularity）粗糙度（roughness）在Tamura表示中的所有纹理性质都是有意义的，与人的主观感受比较吻合，这使得Tamura纹理表示在图象检索中非常具有吸引力，而且可提供一个更有友好的用户界面。形状是描述图像内容的一个重要特征。它常与目标联系在一起，又有一定的语义含义，因而可以看作是比颜色或纹理更高层次的特征。但另一方面，对形状的表达比对颜色或纹理的表达从本质上要复杂得多，常需要先对图像进行分割。由于当前的技术无法做到准确和通用的自动图像分割，图像检索中的形状特征只能在特定应用场合使用。在这些应用中，利用特定领域知识可以从图像中分割出目标（物体或区域）。10.2.4图像形状特征的提取与表示形状描述形状描述方法边缘描述区域描述关键在于边缘检测的研究关键在于图像分割的研究傅立叶描述符、小波描述符、不变矩等基于形状特征的图像检索基本原理形状是刻划物体的本质特征之一。可以针对面积(可用像素点的个数计算)、主轴方向、偏心率、圆形率、连通性、正切角等形状特征进行匹配。颜色、纹理特征反映的是图像的整体特征，而无法体现图像中所包含的对象或物体。复杂物体或物体间的关系有时成为图像检索的兴趣点。10.2.5图像空间关系特征的提取与表示图像的目标关系空间关系(如绝对位置和相对位置)朝向关系(如上、下、左、右等)拓扑关系(如相邻、覆盖、包含等)结构关系提取图像空间关系特征的方法基于区域的图像检索基于分块的图像检索 对图像进行自动分割划分出图像中所包含的对象或颜色区域索引将图像划分为若干子块对每个图像子块提取特征索引空间位置关系的讨论空间关系描述包括基于目标的描述和基于关系的描述。空间关系检索要解决空间关系的建模、表征、相似性量度等问题。由于空间关系特征的模糊性、不确定性以及对自然语言描述的依赖性，因此基于空间关系的检索更复杂、更困难。小结视觉特征的提取是CBIR的基础。仅仅靠单一特征很难完成图像内容的描述。趋势：综合多个特征进行检索。综合特性检索目前，比较成功的基于内容的图像检索系统有：IBM公司的QBIC系统MIT媒体实验室的Photobook系统美国哥伦比亚大学的VisualSEEK系统Virage公司开发的virage检索系统香港公共图书馆的多媒体信息系统（MMIS）基于内容的图像检索——典型系统介绍IBM公司的QBIC系统QueryByImageContent/IBMAlmaden研究中心开发的第一个商用的基于内容的图像及视频检索系统提供对静止图像及视频信息基于内容的检索手段系统结构及所用技术对后来的视频检索有深远的影响MIT媒体实验室的Photobook系统/vismod/demos/photobook/由MIT的媒体实验室开发研制图像在存储时按人脸、形状或纹理特征自动分类图像根据类别通过显著语义特征压缩编码VisualSEEk系统/ln/dvmm/researchProjects/MultimediaIndexing/VisualSEEk/VisualSEEk.htm美国哥伦比亚大学开发的图像查询系统主要特点是用到了图像区域的空间关系查询和直接从压缩数据中提取视觉特征Virage公司开发的virage检索系统香港公共图书馆的多媒体信息系统（MMIS）MultimediaInformationSystem.hk/hkclr2/internet/eng/html/welcome.html?IBM和分包商ICO于1999年底开始承建190万美元的数字图书馆项目被认为是世界上最大且最复杂的“中文/英文”双语图书馆服务之一采用的DB2Text和ImageExtenders既支持文本检索，也支持图片检索10.1基于内容检索技术概述10.2基于内容的图像检索10.3基于内容的视频检索第10章基于内容的图像和视频检索视频信息是一类复杂的信息，它不仅包含静止图像的内容，还包含场景中目标运动的信息和时间变化的信息。视频包含的数据量远远超过其他媒体，因此视频数据一直是多媒体处理和检索中最难解决的问题。10.3基于内容的视频检索视频又称动态图像，是一组图像按时间顺序连续表现，它的表示与图像序列、时间关系有关。视频