探索基于结构边缘引导的文本到图像扩散模型在多光谱卫星图像修复中的能力
计算机视觉与模式识别
2024-03-18 v2
摘要
本快报研究了文本到图像修复模型在卫星图像数据上的效用。通过引入一种基于 StableDiffusion 和 ControlNet 的新型修复框架以及一种 RGB 到 MSI 转换的新方法，解决了将结构引导信号注入生成过程以及将修复后的 RGB 像素转换到更宽 MSI 波段的两个技术挑战。在更宽数据集上的结果表明，通过 StableDiffusion 合成的修复图像存在不期望的伪影，而一种简单的自监督内部修复替代方案实现了更高质量的合成。
引用
@article{arxiv.2311.03008,
title = {Exploring the Capability of Text-to-Image Diffusion Models with Structural Edge Guidance for Multi-Spectral Satellite Image Inpainting},
author = {Mikolaj Czerkawski and Christos Tachtatzis},
journal= {arXiv preprint arXiv:2311.03008},
year = {2024}
}