遥感图像超分辨率重构技术-钱学森空间技术试验室.pdfVIP

遥感图像超分辨率重构技术 辛 蕾，李 峰 （钱学森空间技术实验室空间技术与应用基础研究部，北京100094） 1 引言 图像作为获取信息最直接的途径，提升其分辨率而获得更多信息的需求促 使高分辨率图像技术不断更新发展。图像分辨率的提升受到成像传感器的硬件 成本、制造工艺和信息传输条件的限制，在遥感领域，提高分辨率最直接的方 法就是加大光学系统口径和提高 CCD/CMOS 阵列密度来实现，然而加大光学口 径会导致星上载荷体积、功耗、重量的增加，若采用提高 CCD 或 CMOS 的密度 的方法则图像的质量会有所降低，何况卫星一旦发射，成像设备很难更新，因 此如何利用已有的低分辨率图像获取更多的高频信息，即遥感图像超分辨率重 构问题成为研究重点。 这里所提出的遥感图像超分辨率重构算法定义为利用多时相、同一场景的低 分辨率遥感图像，采用后处理的方式重构出高分辨率图像的技术。图像超分辨率 重构算法的概念，早在上个世纪八十年代由 Tsai 和 Huang 提出，近年在涉及公 共安全的视频监控领域、医学成像领域和图像通信等诸多领域获得成功应用，但 在对地观测领域还远没有达到实用的程度，主要原因是常规超分辨率方法无法克 服低分辨率遥感图像间由于载荷平台抖动和大气扰动带来的非规则几何畸变和 错位，并且缺乏针对遥感图像的高效重构方法；另外一个重要受限条件是获取的 多时相低分辨率遥感图像的时间跨度往往较大（例如美国陆地卫星 LANDSAT-7 的重访周期是16 天），很难保证地物在这个时间段内没有发生变化，因而这项技 术在我国一直没有得到很好的应用与发展。但是随着我国近年来航天/航空事业 的迅猛发展，对地观测载荷和相应的观测数据呈爆炸的增长态势，极大地缩短了 获取多时相低分辨率遥感图像的时间，特别是我国基于面阵CMOS 探测器在星载 遥感相机的规划与发展，其连拍的工作模式亦可以为重叠区域进行超分辨率重构， 同时，我国基于地球同步轨道的光学遥感卫星的发展也日新月异，例如，2015 年底发射的高分四号卫星，能够提供同一地区分钟级甚至秒级多幅图像，这些都 为开展超分辨率技术研究提供了发展契机。 2 研究内容与实验结果 研究发现，同一场景下获取的多帧影像，所获取的低分辨率影像序列丢失 的细节信息不尽相同，对其进行数学算法的处理就可以提高影像的质量。因此 超分辨率扩展为在不改变现有成像系统的条件下对所获取的存在亚像素位移、 欠采样的同一场景的多帧连续影像序列重构出一帧高分辨率影像的过程。应用 该技术有两个前提条件：一是获取同一场景的多帧影像，二是多帧影像中存在 非冗余信息。 超分辨率重构方法主要包含两个关键问题：图像配准和图像重构。 图像配准是一个映射变换过程，即把拍摄于不同时间或不同角度的图像变 换到一个通用的坐标系当中。图像配准是超分辨率图像重构方法中重要的一步， 配准精度直接影响图像的重建质量。目前很多超分辨率方法并没有充分考虑到 多时相图像间存在的非规则几何变形和局部位置错位。特别针对线阵推扫相机， 由于平台抖动和大气扰动等因素的影响，经常导致拍摄于不同时间的遥感图像 间的错位无法采用一种通用的全局数学表达式来描述，如图 1 所示，因而我们 提出了一种弹性配准的方法解决这种图像间存在非规则的几何畸变和位置错 位。 (a) (b) (c) (d) 图 1 从左到右分别为：(a)参考图像、(b)待配准图像、(c)非规则挤压和局部变形示意图、 (d)弹性配准所需反作用示意图 同时，常规的超分辨率方法在重构遥感图像时效果往往不是很理想，主要 原因是它们的先验概率模型并不适合遥感图像。目前实现图像稀疏性表达的方 法主要分成两大类：一种是通过训练或分析的方法建立稀疏字典，这类方法能 够根据图像本身的特点自适应地选取稀疏字典中的元素来实现图像的稀疏性表 达；另一类方法则是基于多尺度分析理论又称为单一基方法，建立适合表达图 像边缘和纹理几何结构的基来实现图像的稀疏性表达。我们立足于后者，挖掘 遥感图像在变换域的稀疏性表达。然而由于地表特征的复杂性，很难找到单一 的通用变换域实现遥感图像的稀疏性表达，因此提出一种多重变换域理论的思 想，将一幅遥感图像理解成由包含不同纹理特征的子图构成，不同纹