CN117152000A 雨天图像清晰背景成对数据集制作方法、装置及其应用 （华中科技大学）.docxVIP

(19)国家知识产权局

(12)发明专利申请

(10)申请公布号CN117152000A(43)申请公布日2023.12.01

(21)申请号202311002415.8

(22)申请日2023.08.08

(71)申请人华中科技大学

地址430074湖北省武汉市洪山区珞喻路

1037号

(72)发明人昌毅郭赟颜露新肖雪尧

(74)专利代理机构华中科技大学专利中心

42201

专利代理师汪洁丽

(51)Int.CI.

GO6TGO6VGO6V

GO6T

5/00(2006.01)

10/774(2022.01)

10/82(2022.01)

3/00(2006.01)

权利要求书3页说明书11页附图2页

(54)发明名称

雨天图像-清晰背景成对数据集制作方法、装置及其应用

(57)摘要

CN117152000A本发明公开了一种雨天图像-清晰背景成对数据集制作方法、装置其应用，属于数字图像处理技术领域。背景复原方法包括：步骤S1、获取雨天拍摄的同一静态背景下的多帧图像，构建雨天图像序列；步骤S2、构造背景复原模型，背景复原模型的优化函数包括图像保真项、背景低秩先验项和雨层稀疏先验项的加权叠加，优化目标为使优化函数最小；步骤S3、求解背景复原模型，输出各背景完全相同的背景序列，得到雨天图像序列的背景。本发明可广泛用于构建真实环境下的成对雨天图像-清晰背景数据集，视场较大，包含实测雨天多种退化类型，能够显著提升现有方法在

CN117152000A

S1

获取雨天拍摄的同一静态背景下的多帧图像，构建雨天图像序列0

S2

构造背景复原模型，背景复原模型的优化函数包括图像保真项P。(0)、背景低秩先验项P?(B)和雨层稀疏先验项P(R)的加权叠加，优化目标为使优化函数最小，背景序列B、雨层序列R、仿射变换因子t为优化变量

S3

求解背景复原模型，输出各背景完全相同的背景序列B,得到雨天图像序列0的背景

CN117152000A权利要求书1/3页

2

1.一种雨天图像-清晰背景成对数据集制作方法，其特征在于，包括下列步骤：

步骤S1、获取雨天拍摄的同一静态背景下的多帧图像，构建雨天图像序列0;

步骤S2、构造背景复原模型，所述背景复原模型的优化函数包括图像保真项P。(0)、背景低秩先验项P?(B)和雨层稀疏先验项P?(R)的加权叠加，优化目标为使所述优化函数最小；所述图像保真项P。(0)为处理序列0○T与叠加序列B+R之间的偏差，处理序列0○T为对雨天图像序列0进行仿射变换后的结果，t为仿射变换因子，叠加序列为背景序列B与雨层序列R的叠加，所述背景低秩先验项P?(B)表达背景序列B的非局部相似性及低秩性约束，所述雨层稀疏先验项P(R)表达雨层序列R的稀疏性约束，背景序列B、雨层序列R、仿射变换因子t为优化变量；

步骤S3、求解所述背景复原模型，输出各背景完全相同的背景序列B,得到雨天图像序列0的背景。

2.如权利要求1所述的雨天图像-清晰背景成对数据集制作方法，其特征在于，步骤S1包括：

步骤S11、利用固定于同一位置的图像采集装置拍摄雨天图像；

步骤S12、对所拍摄的雨天图像进行处理，剔除雨层不明显的图像帧，裁剪背景中存在移动目标的区域，保证各雨天图像的背景是静止的。

3.如权利要求2所述的雨天图像-清晰背景成对数据集制作方法，其特征在于，图像采集装置拍摄的雨天图像的分辨率达到1920*1080及以上，拍摄雨天图像时的降雨量≥10mm/24小时，拍摄场景包含静止的背景图像内容。

4.如权利要求1所述的雨天图像-清晰背景成对数据集制作方法，其特征在于，在步骤S2中，所述图像保真项P。(0)的表达式为：

式中，Ⅱ·|Ⅱ表示F范数。

5.如权利要求1所述的雨天图像-清晰背景成对数据集制作方法，其特征在于，在步骤S2中，所述背景低秩先验项P?(B)的表达式为：

式中，S;B是对雨天图像序列进行非局部相似块重组后的第i个三维张量，i为三维张量的索引，Q是针对第i个三维张量的一个正交子空间投影矩阵，×?表示沿时间维度执行张量积操作，ξ;表示低秩近似变量，|I·|表示张量核范数，Vt表示差分算子，λ和γ为设定的正则化参数。

6.如权利要求1所述的雨天图像-清晰背景成对数据集制作方法，其特征在于，在步骤S2中，所述雨层稀疏先验项P(R)的表达式为