MPEG压缩域中的信息分析和处理研究.pdfVIP

MPEG压缩域中的信息分析与处理研究 谈正王萍粱中华杨子翔 西安交通大学电信学院710049 摘要：近年来，压缩域信息分析处理技术已经成为多媒体研究的热点，本文较为详细地 介绍了作者近期在相关的应用领域所做的工作，即根据压缩域信息分析处理的思想，在 MPEG压缩数据流中直接进行相应的视频处理及操作等等。 关键词： 运动目标检测镜头切分检测视频编辑 T．引言 随着计算技术、网络技术的日新月异，人们对信息的需求望爆炸性增长。多媒体信 息已在人们日常生活中发展成为接触及使用得最多、最广的信息。例如：网络传输、交 互电视、DVD、VCD以及多数频道的广播电视节目等，这些信息都是经过了多媒体数 1、2。 据压缩处理。目前晟为广泛使用的多媒体数据压缩技术是MPEG 如果要对视频流数据进行常规的增强，边缘提取等处理，我们习惯用的就是传统的 方法，即先把MPEG流经解码还原成普通视频流，再按常规方法来处理、然后还需编 码恢复。显然这是十分费力耗时的。因而，直接在MPEG压缩数据域中实现各种视频 操作是值得探讨的。和传统的视频数据处理相比，压缩域的处理方法有以下特点： (1)．直接在压缩域中处理，省略压缩及再压缩环节，从而大大减少总体处理时间。 (2)．压缩域的视频流数据相对于未压缩的原始数据，其数据量己火大减少。在压缩 域中的信息处理，其数据处理量已人为减少，系统处理效率显著提高。 (3)．MPEG压缩技术中的若干处理技术如DC系数、运动估计等可加以利用。 (d)．压缩域的MPEG视频流已丧失了人们熟悉的空域图像特色，只是一连串的数 据流，对处理和分析带来很大的困难和不便。 本文将对压缩变换域中的：运动目标跟踪和检测、视频镜头切分、视频编辑等方面 2．运动目标的信息检测 2．1 MPEG流中的运动信息 MPEG编解码压缩标准在信息冗余压缩方面的效率还是比较可观的。其最核心之处 是：(1)．在空域中，采用JPEG的帧内压缩(即。1帧)。 。· 16宏块的运动预测和补偿；即帧间压缩采用P帧B (2)．在时域中，采用基于16X 帧。而P帧B帧中包含有宏块运动的预测及补偿。可为我们直接处理提供十分有利的 支持。 勰田咽 ，～ 2巳]——匮亟回～ ，田旧 陪 mhw赢w bH№hj ‰ i a P图像中的前舟预测 b B图像中的插值平均(双向)碾潮 图1 预测编码示意图 以图1例来说明：若要对当时帧中的第2行第3列的宏块进行编码，～个16X16 的搜索窗口以某种搜索策略在一定范围内找出和这个宏块晟匹配的宏块。这一过程称为 运动估计。当达到最佳匹配时，其误差应为最小。预测误差的表达式为： ……～ ^∥(H,V)=M¨in荟善Jc(t”一。P。+见y+驯 (J) 式中，C(x，y)表示当前帧数据，P(x+h，y+v)为参考帧数据。 由最佳匹配而求得到了当前宏块，同时也求得了该宏块的一 位置坐标(h，v)。由此给我们一启示：在求运动物体的运动误差 估计的同时，也就求得了该运动物体在不同帧中的位置变化， 其运动矢最也正好表达了(隐含地)我们欲求的运动特征信息。 2．2基于运动矢量的运动目标检测 如图2所示，运动目标检测算法主要包括三部分： 蓬霪遗～ 渺趣矗∥赫… (