视频图像中雨滴检测与去除方法研究.pdfVIP

Microcomputer Applications Vo1．23，No．12，2007 研究与设计 微型电脑应用 2007年第23卷第l2期 文章编号：1OO7—757X(2OO7)12一O016—05 视频图像中雨滴检测与去除方法研究 张颖翔， 陈 强， 刘允才 摘 要：本文根据雨滴的物理光学模型，首先分析了雨滴对视频中单帧图像的光强影响，引入了Nayar的时差法来检测视频 中的雨滴，并对其进行了改进以适应雨点更密集的情况。另一方面，针对像素灰度直方图的全局特性，根据雨滴的时域特性，利用 K--means聚类的方法进行分类。最后对两种方法的实时性和针对不同情况的优劣进行了比较，实验证明了这两种方法的有效 性。 关键词：物理光学模型；时差法；K--means聚类；雨滴去除 中图分类号：TP391．41 文献标识码：A 1 前言 此，我们近似认为绝大多数雨滴是球体。 当雨滴下落时，我们认为它达到了一个最终速度。这个速 对雨滴的研究在环境科学、信号传递和遥感中相当广泛。 度与雨滴大小有关： 许多研究使用动态光源和专门的检测器来检测雨滴在一个传 ：200 a 播信号中的作用。但是，自然环境中雨滴在摄像机中的效果是 不同且有待开发。 在计算机视觉中对外部场景例如雨、雪、雾等的研究是有 挑战性的。雨滴的视觉效果是很复杂的，由于雨滴空间分布的 随机性和快速运动的特性，去除视频中的雨滴是一个较难的 问题。本文第一种方法分析了Garg和Nayar¨】 提出的雨滴的 物理和光学模型，利用运动检测中常用的帧时差法来检测雨 滴，并对该方法进行了优化来适应雨点更密集的情况。第二种 方法是利用视频中雨滴的时域和色彩属性来检测雨滴 ，对 于摄像机固定的情况采用K--means方法来区分雨滴，对于摄 (a)雨滴半径分布 (b)雨滴的形状分布 像机抖动的情况可以采用视频稳定技术来消除抖动，提高了 图1 雨滴的物理特性 准确性。有关雨滴的去除，本文在Garg和Nayar的去除方法基 雨滴类似于透镜，将场景中的光线反射和折射到摄像机。 础上，采用了开运算和膨胀操作来改进去除效果。实验结果表 根据已建立的雨滴的反射和折射的几何光学模型 ]，雨滴具 明，改进后两种方法在不同情况下可以取得比较好的结果。 有近似165度的视角，使得折射到摄像机的光线仅减弱6 。 基于它的光学属性，我们可知： 2 雨滴的物理模型 (1)雨滴以一个很大的角度折射环境光，镜面和内部折射 进一步增加了光强 因此，雨滴本身比它所遮蔽的那部分背景 要亮。 2．1 物理模型 (2)被雨滴遮蔽的背景的视角比雨滴本身的视角范围要 雨是具有不同的形状和大小的水滴随机分布的集合，这 小的多。因此，尽管雨滴是透明的，它的平均亮度并不取决于 些水滴以很快的速度运动。一个雨点的半径的典型大小为0． 它的背景。 1ram到0．35ram。如图1(a)所示是一个典型的雨滴的分布。我 我们使用一段视频来验证上述结论。如图所示，其背景由 们注意到雨滴的密度随着雨滴半径增大而指数级的减小。 不同光强的水平条纹所组成。将被雨滴覆盖的区域标记为A 雨点的形状近似为雨滴大小的函数。图1(