中文

NeuralPCI:用于三维点云多帧非线性插值的时空神经场

计算机视觉与模式识别 2023-03-28 v1

摘要

近年来,计算机视觉中的插值任务受到显著关注。尽管视频插值取得巨大进展,点云插值仍探索不足。同时,真实场景中存在大量非线性大运动,使点云插值任务更具挑战性。鉴于这些问题,我们提出NeuralPCI:一种用于三维点云插值的端到端四维时空神经场,其隐式整合多帧信息以处理室内外场景中的非线性大运动。此外,我们构建了一个名为NL-Drive的新多帧点云插值数据集,用于自动驾驶场景中的大非线性运动,以更好地展示方法的优越性。最终,NeuralPCI在DHB(动态人体)和NL-Drive数据集上均达到最先进的性能。除插值任务外,我们的方法可自然扩展至点云外推、形变和自动标注,表明其在其他领域的巨大潜力。代码见 https://github.com/ispc-lab/NeuralPCI。

关键词

引用

@article{arxiv.2303.15126,
  title  = {NeuralPCI: Spatio-temporal Neural Field for 3D Point Cloud Multi-frame Non-linear Interpolation},
  author = {Zehan Zheng and Danni Wu and Ruisi Lu and Fan Lu and Guang Chen and Changjun Jiang},
  journal= {arXiv preprint arXiv:2303.15126},
  year   = {2023}
}

备注

Accepted by CVPR 2023. Project Page: https://dyfcalid.github.io/NeuralPCI