CroCo：面向地球观测数据定位的跨模态对比学习
计算机视觉与模式识别
2022-04-15 v1
摘要
将地面激光雷达点云在遥感影像上定位是一个值得关注的问题。本文中，我们处理该问题的一个子任务，即把从航空激光雷达点云栅格化得到的数字高程模型（DEM）映射到航空影像上。我们提出了一种基于对比学习的方法，在DEM与高分辨率光学影像上训练，并在不同的数据采样策略与超参数下对框架进行了实验。在最佳情形下，取得了Top-1分数0.71与Top-5分数0.81。所提方法在利用RGB与DEM进行定位的特征学习方面具有前景，并有可能适用于其他数据源。源代码将于https://github.com/wtseng530/AVLocalization发布。
引用
@article{arxiv.2204.07052,
title = {CroCo: Cross-Modal Contrastive learning for localization of Earth Observation data},
author = {Wei-Hsin Tseng and Hoàng-Ân Lê and Alexandre Boulch and Sébastien Lefèvre and Dirk Tiede},
journal= {arXiv preprint arXiv:2204.07052},
year = {2022}
}
备注
Accepted for publication in the ISPRS Annals of the Photogrammetry, Remote Sensing and Spatial Information Sciences (online from July 2022)