压缩域视频处理关键帧提取技术初步研究.docVIP

压缩域视频处理关键帧提取技术初步研究 　　 (北京工业大学 信号与信息处理研究室， 北京 100124) 　　?? 　　摘 要： 　　将视频序列通过关键帧提取的方式转换成静态图像，然后利用图像处理技术进行分析是视频处理的一种有效方法。首先讨论了近年来基于压缩域的关键帧提取技术，然后分析和讨论了针对敏感视频识别应用的关键帧提取方法，并给出了一种快速有效的关键帧提取方案。 　　?す丶?词：视频处理； 压缩域； 关键帧； 敏感视频 　　?ぶ型挤掷嗪牛?TP391 文献标志码： 　　 文章编号：1001-?B3695(2009)02-?B744-?B03 　　?? 　　Study on key frames extraction for video processing in compressed domain 　　?? 　　ZHAO Shi-wei, ZHUO Li, SHEN Lan-sun 　　??(Signal Information Processing Lab, Beijing University of Technology, Beijing 100124, China) 　　?? 　　Abstract:The approach of retrieve key frames from video and then process them is an efficient way to process video data. Reviewed the research results of extracting key frames based on compressed domain in recently years, and made analysis and discussion to retrieve key frames for applications to identify objectionable video. Proposed a fast and efficient scheme for this goal at the end. 　　??Key words：video processing; compressed domain; key frames; objectionable video 　　?お? 　　图像/视频信息具有海量性与无序性的特点[1]，尤其是视频信息数据量庞大，出于存储和传输的考虑，这类信息是以压缩的形式存在的。传统的视频处理技术是在像素域进行的，对于压缩形式的数据需要将其解压至像素域进行处理。压缩域视频处理技术研究如何在不解码或部分解码的压缩码流上直接进行操作[1,2]。基于压缩域的数据处理具有以下优势：省去了大部分解码时间，处理速度快；直接对压缩码流操作，资源占用少；压缩域特殊的编码结构在一定程度上适应了多媒体数据分析的要求。基于压缩域的视频处理技术所具有的这些优势，对于快速的视频信息的检索、网络信息安全等均具有重要的?┮庖濉＊? 　　近年来，基于压缩域的图像处理技术已经取得明显进展。文献[3]提出了一种直接在DCT压缩域根据Retinex理论，利用DCT变换的系数进行图像增强的算法；文献[4]提出了一种在DCT压缩域进行图像任意比例缩放的算法；文献[5]提出了基于JPEG2000压缩域进行图像亮度调整、对比度调整、图像重叠、线性滤波等操作的方法。除此之外，基于压缩域的图像检索技术也取得了不少研究成果。文献[6]在4×4整数变换后的压缩域中，利用每个系数的8邻域值构建了BFV(binary feature vector)和TFV(ternary feature vector)特征矢量，并通过统计直方图进行图像检索，取得了较好的检索效果；文献[7]扩展了MPEG-7中的边缘直方图描述，并在DCT压缩域中提取出了图像的边缘信息，为基于边缘的图像检索打下基础。文献[8~10]研究了从JPEG和JPEG2000压缩的图像中提取统一特征的方法，并提出了跨越不同压缩标准的压缩域图像检索方法。北京工业大学信号与信息处理研究室对基于压缩域的图像处理和检索技术进行了大量的研究，并在压缩域的纹理信息分类[11~13]、轮廓提取[14]、字符定位[15,16]、肤色分割[17]、人脸检测[18,19]等方面取得了一系列的成果。?? 　　视频信息可以看做是静态图像的组合，鉴于当前已经在压缩域图像处理领域取得的进展，将压缩域视频处理转换为图像处理是一种自然的选择。然而由于相邻视频帧之间存在内容上的相关性，如果对视频的每一帧都进行处理，则工作量会很大，且将产生大量的冗余操作。因此，通过关键帧提取技术在视频中提取出若干有代表性的帧图像，然后再通过图像处理进行分析，