图像融合质量主客观评价相关性分析.doc

文章编号：1672-6332（2011）01-0023-08 [信息技术应用研究] 图像融合质量主客观评价相关性分析 刘秀坚1,2，任仙怡2,3，郑义军1,2，胡 (1.深圳大学计算机与软件学院，深圳 518060； 涛2,3 2.深圳市可视媒体处理与传输重点实验室，深圳 518029； 3.深圳信息职业技术学院，深圳 518029） 摘 要：建立图像融合质量评价标准对于在不同的应用场景中选择适当的融合算法，以及对现有融合算法的改进 和研究新的融合算法都是至关重要的。本文在分析目前广泛使用的图像融合质量主客观评价方法的基础上，对图像融 合质量进行了主客观评价并对主客观评价结果进行了相关性分析，发现结合了人类视觉特性的客观评价方法与主观分 析结果较为一致，充分说明了建立新型的、结合主观因素与客观因素的图像融合评价准则的必要性。 关键词：图像融合；客观评价方法；主观评价方法；结构相似度；相关性分析 中图分类号: TP391 文献标识码：A 图像融合（Image Fusion）技术是指将多源信道 所采集到的同一目标的图像经过一定的处理，提取 各信道的信息，最后综合成一幅新的图像以供观察 或进一步处理的过程。这幅新图像能准确综合地反 映源图像的信息，更适合人眼观察或计算机处理。 近年来，有不少学者提出了各种融合方法，而对融 合的效果评价方面却一直没得到很好的解决 [1]。 当前评价融合效果的方法主要可以分为两类： 主观评价方法和客观评价方法。主观评价方法是由 判读员直接对图像进行质量评价，具有简单直观的 特点。然而在人为评价融合方法的过程中，会有主 观因素影响评价结果，因此需要进行精心的实验设 计。而客观评价方法是通过定义一些数学公式，建 立起与图像质量含义相关的数学模型，然后对待评 价图像进行运算，得到数字量作为评测结果。客观 评价方法具有成本低、易于实现等优点，但现有的 客观评价方法最大问题在于没有充分考虑人类视觉 系统的特点，使得判断结果往往与主观判断不符， 这对于以人眼为最终信宿的图像融合任务来说是很 不合理的。 面对传统图像融合质量评价的不足及其存在 的问题，人们希望能够找出符合人眼主观视觉的客 观图像评价标准作为评价图像和设计图像系统的依 据。有研究者已经试图在客观评价指标中结合人类 视觉的特性，如加权信噪比（WSNR）、视觉加权 均方误差（WMSE）和基于结构相似度的图像融合 质量评价等方法，其中基于结构相似度的图像融合 质量评价准则由于符合人眼对图像结构信息敏感的 特性从而表现尤为突出[2][3]。 本文对多组图像用不同方法进行融合，对融合 结果图像做了主观评价和客观评价，并对主客观评 价做相关性分析，发现融入人类视觉特性的客观评 价指标与主观评价最为一致，证明了在客观评价指 标中引入人类视觉特性的必要性。 本文第二节介绍了常用的传统客观评价方法及 融入人类视觉特性的结合互信息与结构相似度的评 价方法；第三节介绍本文所采用的主观评价方法， 列出三类代表图像的融合质量主客观评价实验结 果，对主客观评价数据进行相关性分析；第四节总 结实验结果，并指出图像融合质量评价方法研究的 方向。 [收稿日期] 2011-02-01 [基金项目] 国家自然科学基金项目；广东省自然科学基金项目（9151009001000052） [作者简介] 刘秀坚（1983-），男，广东省梅州市人，硕士研究生，E-mail:  HYPERLINK mailto:gamgle303@163.com gamgle303@163.com 平均梯度(Average Gradient)反映了融合图像中 的微小细节反差与纹理变化特征，同时也反映了融 合图像的清晰度。 1 客观评价方法 1.1 传统客观评价方法 传统的客观评价方法主要分为三类[2]： 1）根据单个图像统计特征的评定方法：如信 息熵、平均梯度； 2）根据融合图像与标准参考图像关系的评定 方法，如均方误差、峰值信噪比； 3）根据融合图像与源图像关系的评定方法， 如偏差度、互信息。 这些方法虽能将评价量化表达，但没有考虑 人眼的感知特性，不能真实反映融合图像的视觉感 知质量，其准确性相对较差。在图像融合问题中， 许多情况下无法得到标准参考图像，因此本文只研 究无标准参考图像的图像融合质量客观评价方法。 常用的无标准参考图像的客观评价指标有偏差度、 熵、互信息、梯度等。 偏差度：表示融合图像和源图像的偏离程度， 越小说明两幅图像越接近。 （4） 其中， 、 分别为像素 在 x与y方向上的一阶差分。 上述图像融合质量评价方法或者是基于像素点 间的误差，或者是依据图像的统计特性，都没有考 虑图像的整体结构信息。而研究表明，人眼往往是 对图像中的结构信息更为敏感。 1.2 融入人类视