夜视环境下红外与可见光图像真彩色快速融合方法研究.pdfVIP

第５４卷第１期激光与红外Ｖｏｌ．５４，Ｎｏ．１

２０２４年１月ＬＡＳＥＲ＆ＩＮＦＲＡＲＥＤＪａｎｕａｒｙ，２０２４

文章编号：１００１５０７８（２０２４）０１０１３６１２·图像与信号处理·

夜视环境下红外与可见光图像真彩色

快速融合方法研究

谢一博，程进，周顺，侯劲尧，刘卫国

（西安工业大学光电工程学院，陕西西安７１００２１）

摘要：为解决红外图像和可见光图像在夜视环境下成像效果不理想的问题，搭建一种由红外

相机与ＲＧＢ相机组合而成的具有结构简单、实时性高等特点的双目异型成像系统。利用双线

程方式实时采集红外与可见光图像，针对非局部均值滤波（ＮｏｎＬｏｃａｌＭｅａｎ，ＮＬＭ）提出了一种

基于熵的自适应ｈ求解方法，能够较好的消除红外图像的噪声；之后将红外图像与可见光图像

的特征点匹配后，引入基于斜率一致性的方法进行图像配准，最后采用改进基础图像融合规则

的双尺度融合算法（ＴｗｏｓｃａｌｅＩｍａｇｅＦｕｓｉｏｎ，ＴＩＦ）以及多种融合算法将红外与可见光图像进行

融合，获得目标明显、信息丰富且真实色彩的（ＩｎｆｒａｒｅｄＲａｄｉａｔｉｏｎａｎｄＲＧＢ，ＩＲＲＧＢ）融合图像。

ＴＩＦ算法能够高效快速地将红外图像与可见光图像融合，在保留了可见光图像对周围环境的

真实颜色信息特征的同时，又保留了红外图像温度提取的特点。分析数据可知，ＴＩＦ算法的

ＩＲＲＧＢ图像的熵值提升了约５１４％；其边缘强度均达到最大３９９９１、２２４３３、５２８８０；相比

普通的像素级融合规则，该方法的运行速度提升了１０倍的量级。该研究在夜视环境下通过红

外与可见光的实时成像在目标识别和监测等实际应用中具有非常重要的意义。

关键词：图像处理；成像系统；双尺度图像融合；互补信息；目标识别

中图分类号：ＴＰ３９１；ＴＮ２１９文献标识码：ＡＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．１００１５０７８．２０２４．０１．０２０

Ｒｅｓｅａｒｃｈｏｎｔｈｅｆａｓｔｆｕｓｉｏｎａｌｇｏｒｉｔｈｍｏｆｏｆｔｒｕｅｃｏｌｏｕｒｏｆｉｎｆｒａｒｅｄ

ａｎｄｖｉｓｉｂｌｅｉｍａｇｅｓｕｎｄｅｒｎｉｇｈｔｖｉｓｉｏｎｅｎｖｉｒｏｎｍｅｎｔ

ＸＩＥＹｉｂｏ，ＣＨＥＮＧＪｉｎ，ＺＨＯＵＳｈｕｎ，ＨＯＵＪｉｎｇｙａｏ，ＬＩＵＷｅｉｇｕｏ

（ＳｃｈｏｏｌｏｆＰｈｏｔｏｅｌｅｃｔｒｉｃＥｎｇｉｎｅｅｒｉｎｇ，Ｘｉ′ａｎＴｅｃｈｎｏｌｏｇｉｃａｌＵｎｉｖｅｒｓｉｔｙ，Ｘｉ′ａｎ７１００２１，Ｃｈｉｎａ）

Ａｂｓｔｒａｃｔ：Ｉｎｔｈｉｓｐａｐｅｒ，ａｂｉｎｏｃｕｌａｒｈｅｔｅｒｏｇｅｎｅｏｕｓｉｍａｇｉｎｇｓｙｓｔｅｍｗｉｔｈｓｉｍｐｌｅｓｔｒｕｃｔｕｒｅａｎｄｈｉｇｈｒｅａｌｔｉｍｅｃｈａｒａｃｔｅｒｉｓｔｉｃｓｉｓ

ｂｕｉｌｔｂｙｃｏｍｂｉｎｉｎｇｉｎｆｒａｒｅｄｃａｍｅｒａａｎｄＲＧＢｃａｍｅｒａｉｎｏｒｄｅｒｔｏｓｏｌｖｅｔｈｅｐｒｏｂｌｅｍｓｏｆｕｎｓａｔｉｓｆａｃｔｏｒｙｉｍａｇｉｎｇｅｆｆｅｃｔｏｆｉｎｆｒａ

ｒｅｄｉｍａｇｅａｎｄｖｉｓｉｂｌｅｉｍａｇｅｉｎｎｉｇｈｔｖｉｓｉｏｎｅｎｖｉｒｏｎｍｅｎｔＦｉｒｓｔｌｙ，ｔｈｅｉｎｆｒａｒｅｄａｎｄｖｉｓｉｂｌｅｉｍａｇｅｓａｒｅａｃｑｕｉｒｅｄｉｎｒｅａｌｔｉｍｅｕ

ｓｉｎｇａｄｕａｌｔｈｒｅａｄｅｄａｐｐｒｏａｃｈ，ａｎｄａｎｅｎｔｒｏｐｙｂａｓｅｄａｄａｐｔｉｖｅｈｓｏｌｖｉｎｇｍｅｔｈｏｄｉｓｐｒｏｐｏｓｅｄｆｏｒＮｏｎＬｏｃａｌＭｅａｎｆｉｌｔｅｒｉｎｇ，

ｗｈｉｃｈｉｓｃａｐａｂｌｅｏｆｂｅｔｔｅｒｅｌｉｍｉｎａｔｉｎｇｔｈｅｎｏｉｓｅｏｆｉｎｆｒａｒｅｄｉｍａｇｅｓ