随着航空航天和遥感成像技术的发展,不同的对地观测卫星为同一地区提供了多模态
遥感影像数据,相对于单一数据源,多模态遥感数据可提供互补的信息。将不同模态的影
像进行集成,需要对影像进行配准。作为影像处理的一项必要步骤,影像配准是将不同时
间、不同视角或不同传感器下获取的同一区域内的多张影像进行对齐和叠加的过程
[1]
。光
学影像具有良好的可解译性,但是易受到环境和气候的影响,合成孔径雷达(synthetic
aperture radar,SAR)影像具有极强的穿透性,其全天候对地观测获取信息的能力可以弥
补光学影像信息的不足。由于成像机理的不同,如光学传感器为被动式遥感,成像依赖于
光照条件。合成孔径雷达为主动式遥感,成像不需要光照条件,但 SAR 影像存在固有的
斑点噪声,因此,光学影像与 SAR 影像之间存在着严重的几何形变和辐射差异,致使传
统的配准方法难以适用于光学影像与 SAR 影像之间的自动配准
[2]
,所以光学影像与 SAR
影像之间的配准非常具有挑战性。
目前,影像配准方法主要可分为基于特征的方法和基于区域的方法两类
[1,3]
。基于特
征的方法是对影像进行特征检测和匹配,通过建立影像间的几何变换模型来实现配准,最
常见的特征有点特征
[4]
、线特征
[5]
和面特征
[6]
。这些特征虽然对影像间的光照变化和几何形
变具有一定的鲁棒性,但难以适应于光学影像与 SAR 影像之间的非线性辐射差异
[7]
。具有
尺度和旋转不变性的 SIFT 特征
[8]
也因光学影像与 SAR 影像之间的固有差异,难以提取出
具有高重复率的特征点,不能适用于光学与 SAR 影像之间的配准。基于区域的方法被称
为模板匹配,首先,在参考影像上定义一定大小的模板窗口;然后,以某种相似性测度为
准则在待匹配影像上进行模板滑动,并将模板窗口的中心作为同名点。常用的相似性测度
有互信息(mutual information,MI)
[9]
、归一化互相关(normalized cross correlation,
NCC)
[10]
等。NCC 虽被广泛应用于影像配准,但它对影像间的非线性辐射差异及其敏感,
限制了它在光学与 SAR 影像配准中的应用。相比于 NCC,MI 虽能够适应影像间的辐射差
异,但其庞大的计算量同样限制了它的应用
[11]
。最近的研究发现影像间的几何结构特征能
较好地反映多模态遥感影像间的共有属性,并且相关学者已经将其应用于光学与 SAR 影
像之间的配准。Ye 等
[12]
利用相位一致性提出了一种几何结构相似性测度——相位一致性方
向直方图(histogram of orientated phase congruency,HOPC),该算法能有效应用于
异源遥感影像的配准。Ye 等
[13]
使用图像的方向梯度信息构建了一种鲁棒的结构特征描述符
——方向梯度通道特征(channel features of orientated gradients,CFOG),进一步提高
了配准的精度与效率。尽管如此,这些结构特征描述符因特征维数较高,数据量较大,其
计算效率难以满足实时匹配的需求,并且它们也不能适应具有较大旋转和尺度差异的影
像。
近年来,基于深度学习的方法应用到了多源遥感影像的配准。Merkle 等
[14]
使用孪生网
络对光学与 SAR 影像进行配准;Girard 等
[15]
提出了一种通过训练多任务学习的深度学习方
法提高了配准的精度;Bürgmann 等
[16]
通过深度神经网络学习训练了一种名为 HardNet 的
特征描述符,这种描述符被应用于光学影像与 SAR 影像的同名点自动提取;许东丽等
[17]
使
用随机特征选择卷积神经网络对 Landsat 8 卫星影像进行了配准。虽然利用深度学习对光
学影像与 SAR 影像进行配准逐渐成为了研究热点,但基于深度学习的方法需要大量的训
评论0
最新资源