单幅与积分多光谱航拍图像的融合
图像与视频处理
2024-02-15 v5 计算机视觉与模式识别
摘要
从多个输入通道充分融合最显著的显著信息，对许多航拍成像任务至关重要。多光谱记录可揭示各光谱范围内的特征，而合成孔径传感使被遮挡特征可见。我们提出首个混合（基于模型与基于学习）架构，用于融合常规航拍图像与积分航拍图像（后者为合成孔径传感去除遮挡的结果）中最显著的特征。它将环境的空间参考与被浓密植被通常遮挡的未遮挡目标特征相结合。我们的方法在互信息、视觉信息保真度和峰值信噪比等常用指标上，视觉与定量均优于最先进双通道与多通道融合方法。所提模型无需手动调参，可扩展至任意数量与任意组合的光谱通道，并可重构以应对不同用例。我们展示了搜索救援、野火探测与野生动物观测的实例。
引用
@article{arxiv.2311.17515,
title = {Fusion of Single and Integral Multispectral Aerial Images},
author = {Mohamed Youssef and Oliver Bimber},
journal= {arXiv preprint arXiv:2311.17515},
year = {2024}
}