案例9图像拼接和图像融合.pptxVIP

案例9 图像融合和拼接崔丽信息融合（Information Fusion）对来自多个传感器的多源信息进行多级别、多方面和多层次的处理和综合，从而获得更丰富、更准确、更可靠的有用信息。信息融合是一种多层次、多方面的处理过程，这个过程对多源信息进行检测、结合、相关、估计和组合，以达到精确的状态估计和身份估计记忆完整、及时的态势估计和威胁估计。 ——J.Llinas and W.Edward图像融合（Image Fusion）图像融合是将两个或两个以上的传感器在同一时间或不同时间获取的关于某个具体场景的图像或图像序列信息加以综合，以生成新的有关此场景解释的信息处理过程。图像融合是是指将多源信道所采集到的关于同一目标的图像数据经过图像处理和计算机技术等，最大限度的提取各自信道中的有利信息，最后综合成高质量的图像，以提高图像信息的利用率、改善计算机解译精度和可靠性、提升原始图像的/view/1237326.htm空间分辨率和/view/3163849.htm光谱分辨率。图像融合是以图像为研究对象的信息融合，它把对同一目标或场景的用不同传感器获得的不同图像，或用同种传感器以不同成像方式或在不同成像时间获得的不同图像，融合为一幅图像，在一幅融合图像中能反应多重原始图像的信息，已达到对目标和场景的综合描述，使之更适合视觉感知或计算机处理。它综合了传感器、信号处理、图像处理和人工智能等技术的新兴学科。融合图像源分类多源图像多传感器图像：成像机理不同的独立传感器获得的图像（不包括遥感图像）如前视红外图像和可见光图像CT图像和MRI图像前视红外线图像和毫米波雷达图像多源图像遥感多光源图像：成像机理不同的传感器或同种传感器不同工作模式获得的遥感图像如:SPOT卫星的多光谱图像和全色图像Quick Bird卫星的多光谱图像和全色图像多源图像多聚焦图像：光学传感器的不同成像方式（指不同聚焦点）获得的图像多源图像时间序列（动态）图像：同种图像传感器以相同成像方式在离散时刻拍摄的图像图像融合的处理过程图像配准、图像融合、特征提取、识别与决策图像融合分三个层次：像素级严格配准的条件下，直接进行信息综合。基于数据层面，主要完成多源图像中目标和背景信息的直接融合。最低层次的图像融合，准确性最高，能够提供其他层次处理所具有的细节信息。处理的信息量较大。特征级与处理和特征提取后获得的景物信息如边缘，形状，纹理和区域等信息进行综合与处理。中间层次信息融合，即保留了足够数量的重要信息，有可对信息进行压缩，有利于实时处理决策级根据一定的准则以及每个决策的可信度做出最优决策。最高层次的信息融合，实时性好，并且具有一定的容错能力。基于认知模型的方法，需要大型数据库和专家决策系统进行分析、推断、识别。图像融合预处理1. 图像增强空间域增强点运算：线性变换，非线性变换，直方图均衡化，归一化。邻域运算：图像平滑，锐化频域增强塔式分解增强，Fourier变换增强，滤波彩色增强伪彩色增强，假彩色增强，彩色变换图像代数运算插值法，比值法，混合运算法，分辨率融合多光谱图像增强主成分分析，K-T变换2. 图像矫正和配准基于灰度信息的图像配准基于灰度的一些统计信息来度量图像的相似度。优点简单易行，缺点计算量大，对噪声敏感。三种方法互相关法序贯相似度检测匹配交互信息法基于变换域图像配准方法图像间的平移，旋转，缩放在频域上有对应，对抗噪声有一定的鲁棒性2. 图像矫正和配准基于特征的图像配准方法基于灰度和变换域有如下不足：受光照影响大，对灰度变换敏感搜索空间会出现很多局部极值点，涉及到阈值的设定处理信息量大，计算复杂度高对旋转，尺度变换以及遮掩等敏感基于特征的方法图像中特征数较少，特征间的匹配度量岁位置变动很大，可以利用图像轮廓特征间的几何约束关系，对干扰变形等有较强的适应能力——比如指纹中的特征点匹配，纹线匹配步骤：1）特征提取：特征点（角点，高曲率点），直线段，边缘，轮廓，闭合区域，特征结构以及统计特征，矩不变量，重心等2）特征匹配3）图像转换——完成图像整理变换简单介绍几种图像匹配算法互相关法： 它是一种匹配度量，通过计算模板图像和搜索窗口之间的互相关值，来确定匹配的成都，互相关最大时的搜索窗口决定了末班图像在待匹配图像中的位置。 对图像I和一个尺寸小于I的模板T，归一化二维交叉相关函数定义如下： C(u,v)表示了模板在图像上位移(u,v)位置的相似成都基于变换域的图像配准Matlab程序（变换域的配准）1. 平移检测clear;I = imread(cameraman.tif);%参数[25,30]可以修改，修改后平移距离对应改变 ,得到图像平移后图像TIse = translate(strel(1), [35 25]); TI = imdilate(I,se); imshow(TI)