ESC-MISR：增强空间相关性以实现遥感多图像超分辨率
计算机视觉与模式识别
2024-11-08 v1
摘要
多图像超分辨率(MISR)是遥感领域一项关键且具有挑战性的研究任务。本文中，我们研究了遥感多图像超分辨率(MISR-RS)任务，旨在从卫星获取的多幅低分辨率(LR)图像生成高分辨率(HR)图像。近期，LR图像之间弱时间相关性在MISR-RS任务中受到越来越多的关注。然而，现有MISR方法将LR图像视为具有强时间相关性的序列，忽略了空间相关性并施加了时间依赖。为解决这一问题，我们提出了一种名为增强MISR中空间相关性(ESC-MISR)的新型端到端框架，充分利用多幅图像的空时关系进行HR图像重建。具体而言，我们首先引入了一种名为多图像空间变换器(MIST)的新型融合模块，强调具有更清晰全局空间特征的部分并增强LR图像之间的空间相关性。此外，我们对LR图像的顺序输入采用随机打乱策略，以减弱时间依赖性并在训练阶段捕获弱时间相关性。与最先进方法相比，我们的ESC-MISR在PROBA-V数据集的两个波段上分别实现了0.70dB和0.76dB的cPSNR提升，证明了本方法的优越性。
引用
@article{arxiv.2411.04706,
title = {ESC-MISR: Enhancing Spatial Correlations for Multi-Image Super-Resolution in Remote Sensing},
author = {Zhihui Zhang and Jinhui Pang and Jianan Li and Xiaoshuai Hao},
journal= {arXiv preprint arXiv:2411.04706},
year = {2024}
}