中文

稀疏 SPN:基于稀疏关键点的深度补全

计算机视觉与模式识别 2022-12-05 v1

摘要

我们的长期目标是利用基于图像的深度补全,从稀疏点云(例如来自 SfM 或 SLAM)快速创建三维模型。深度补全已取得诸多进展。然而,当前大多数工作假设已知深度样本分布良好,例如 Lidar 或随机均匀采样,并在非均匀样本(如来自关键点)上表现不佳,原因在于存在大片未采样区域。为解决该问题,我们扩展 CSPN,引入多尺度预测与空洞核,从而显著改善关键点采样深度的补全效果。我们还展示了在 NYUv2 上训练的模型可通过补全稀疏 SfM 点,在 ETH3D 上生成令人惊讶的高质量点云。

关键词

引用

@article{arxiv.2212.00987,
  title  = {Sparse SPN: Depth Completion from Sparse Keypoints},
  author = {Yuqun Wu and Jae Yong Lee and Derek Hoiem},
  journal= {arXiv preprint arXiv:2212.00987},
  year   = {2022}
}