中文

SelfTune:基于自监督学习的度量尺度单目深度估计

计算机视觉与模式识别 2022-03-11 v1

摘要

野外单目深度估计本质上预测的是尺度未知的深度。为解决尺度模糊问题,我们提出了一种利用单目同步定位与建图 (SLAM) 与本体感受传感器的学习算法。此类单目 SLAM 系统可提供度量尺度的相机位姿。给定这些度量位姿与单目序列,我们提出了一种自监督学习方法,使预训练的有监督单目深度网络能够实现度量尺度深度估计。我们的方法基于教师-学生框架,引导网络预测高质量深度。我们证明了我们的方法对移动机器人导航等多种应用有用,并适用于多样环境。我们的完整系统在 EuRoC、OpenLORIS 和 ScanNet 数据集上优于近期自监督深度估计与补全方法。

关键词

引用

@article{arxiv.2203.05332,
  title  = {SelfTune: Metrically Scaled Monocular Depth Estimation through Self-Supervised Learning},
  author = {Jaehoon Choi and Dongki Jung and Yonghan Lee and Deokhwa Kim and Dinesh Manocha and Donghwan Lee},
  journal= {arXiv preprint arXiv:2203.05332},
  year   = {2022}
}