综合灰度和纹理特征的视频段检索匹配与研究.pdf

综合灰度和纹理特征的视频段检索匹配研究 摘 要 在当今图像、视频检索匹配领域，基于内容的检索技术已经替代基于文本的 方式成为主要技术手段和发展趋势。所谓基于内容是指根据图像的颜色、形状、 纹理、结构等特征来查询图像与视频，它融合了计算机图像处理、模式识别、数 据库等方面的关键技术。由于视频是由连续图像帧组成的内容信息更为复杂的线 性结构，在底层上可以应用基于图像的检索匹配方法。然而视频资料数据量巨大， 如何有效提取内容特征并利用图像检索技术提出高效检索策略，使之满足实时性 要求成为实现视频检索的突破口。 视频检索技术，如基于抽象语义描述的场景镜头检索以及视频段检索匹配都 有着广泛的应用，而后者一种典型应用便是广告视频段的检索匹配。为做市场评 估，广告商评测电视广告在电视台投放质量（如播放是否准时及时长是否准确） 及研究竞争对手投放情况。这需要在电视节目视频流里寻出与给定基准广告视频 匹配的视频段并统计相关信息，通常这都采用人工操作手段，自动化程度低，且 无法获得对数据的精确描述。 本文以上述广告视频段的检索匹配为应用基点，探索研究了图像视频检索的 几项关键性技术，实现了满足实时性且有较高效率与健壮性的视频段检索匹配系 统。 首先,在图像帧特征提取的结构上采用分块划分的策略，由此可利用分块带 来的空间方位信息，避免全局性特征的复杂以及空间信息欠缺问题。并考虑到图 像的主体焦点内容在中心位置，且重要性由里到外依次减少，提出一种按此规律 给分块编序的方法，以表征分块在重要性上的优先级别。 其次，作为基于内容检索技术的核心，本文在图像帧的特征提取方面提出了 综合灰度与纹理特征的新模式。其中针对颜色灰度特征提出了灰阶顺序码的新概 念，能够有效描述分块内子域间的灰度逻辑关系，结合分块整体灰度均值能稳定 描述分块颜色灰度的视觉特性，大大降低对灰度噪声及线性变化的敏感度，具有 良好的鲁棒性。纹理特征则采用具有较好视觉描述性能的Gabor 变换来提取纹理 参数，它是种多尺度多方向的描述方式；而为降低提取纹理特征的复杂度，在保 留主要信息的前提下，结合Harr 小波变换与Gabor 变换提出一种新的纹理提取 方案，综合利用两种变换的各自优势，使其计算复杂度降低，达到实时性要求。 为提高视频段检索匹配的效率，在整体性检索方案上提出根据特征匹配的逐 级过滤检索匹配策略，建立多层级的相似匹配筛选，排除无必要的非匹配图特征 计算过程，节约计算成本。该策略将检索过程分成粗检索和精检索两个阶段，这 两个阶段分别应用对应的灰度和纹理特征来筛选搜索空间，对于两幅存在较大差 异的不匹配图，能中途计算过程中就判断出不匹配从而节省计算量。 另外，在视频镜头划分与关键帧提取方面，本文论证了全局直方图方法的有 效和便捷性。对于需要满足实时性要求的检索系统，全局直方图方法具有充分的 使用价值。此外，提出在建立镜头和关键帧层次关系过程中使用聚类的方法，以 配合逐级过滤匹配策略。 关键词：图像检索；广告视频段匹配；分块；Harr 小波变换；Gabor 变换 GREY AND TEXTURE FEATURE BASED VIDEO SEQUENCES MATCHING ALGORITHM STUDY ABSTRACT In the Image Video retrieval and matching field, Text-based technique has been substituted by Content-based technique, which becomes the main methods and development trend. Whats called Content-based means that query image video by color, shape and texture of image, and combined with those technology of computer image processing, pattern recognization and database. Because video is