融合内参与时空约束的无监督单目深度学习
计算机视觉与模式识别
2021-08-17 v3 机器学习
机器人学
摘要
近年来,单目深度推断受到了研究人员的极大关注,并仍是有望替代昂贵飞行时间传感器的方案,但尺度获取与实现开销问题仍困扰着这些系统。为此,本工作提出了一种无监督学习框架,能够通过单一网络从单目图像序列中预测具有真实尺度的深度图、自运动以及相机内参。我们的方法结合了空间与时间几何约束以求解深度与位姿尺度因子,这些约束在训练时通过监督式重建损失函数施加。训练我们单网络架构的权重仅需未标注的立体序列,与先前方法相比降低了整体实现开销。我们的结果表明,在 KITTI 驾驶数据集的多个序列上与当前最先进方法相比具有强劲性能,并且凭借其精简的网络复杂度可提供更短的训练时间。
引用
@article{arxiv.2011.01354,
title = {Unsupervised Monocular Depth Learning with Integrated Intrinsics and Spatio-Temporal Constraints},
author = {Kenny Chen and Alexandra Pogue and Brett T. Lopez and Ali-akbar Agha-mohammadi and Ankur Mehta},
journal= {arXiv preprint arXiv:2011.01354},
year = {2021}
}
备注
Accepted to the IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS 2021), Prague, Czech Republic