用于无人机视角地理定位的朝向引导对比学习
计算机视觉与模式识别
2023-08-03 v1
摘要
在日益数据驱动的世界中，检索相关多媒体内容是一个主要问题。随着无人机的普及，广泛的受众首次能够获得高质量的航拍影像。将这些影像集成到应用中可实现无 GPS 的地理定位或位置校正。在本文中，我们提出了一种用于无人机视角地理定位的朝向引导训练框架。通过分层定位，估计无人机图像相对于卫星影像的朝向。我们针对这些伪标签提出了一个轻量预测模块，该模块基于对比学习得到的嵌入来预测不同视角间的朝向。我们通过实验证明该预测有助于训练并优于先前的方法。提取的伪标签还能够将卫星图像进行对齐旋转作为增强以进一步强化泛化能力。在推理阶段，我们不再需要该朝向模块，这意味着无需额外计算。我们在 University-1652 和 University-160k 数据集上均取得了最先进的（SOTA）结果。
引用
@article{arxiv.2308.00982,
title = {Orientation-Guided Contrastive Learning for UAV-View Geo-Localisation},
author = {Fabian Deuser and Konrad Habel and Martin Werner and Norbert Oswald},
journal= {arXiv preprint arXiv:2308.00982},
year = {2023}
}