鲁棒等距非刚性运动恢复结构
计算机视觉与模式识别
2021-06-03 v2
摘要
非刚性运动恢复结构（NRSfM）从单目 2D 图像间建立的对应关系中重建可形变的 3D 物体。当前的 NRSfM 方法缺乏统计鲁棒性，即应对对应错误的能力。这阻碍了对易出错的自动建立对应关系的利用，从而严重限制了 NRSfM 的适用范围。我们提出一种利用等距性鲁棒求解 NRSfM 的三步自动流程。步骤 1 从对应关系计算光流，步骤 2 使用多张参考图像重建每个 3D 点的法向量，并以其最佳参考整合形成表面，步骤 3 剔除在其局部邻域内破坏等距性的 3D 点。重要的是，每一步都旨在丢弃或标记错误对应关系。我们的贡献包括通过扭曲估计实现光流的鲁棒化、局部法向量重建的新快速解析解及其鲁棒化，以及一种新的尺度无关的 3D 局部等距一致性度量。实验结果表明，我们的鲁棒 NRSfM 方法在合成与真实数据集上均持续优于现有方法。
引用
@article{arxiv.2010.04690,
title = {Robust Isometric Non-Rigid Structure-from-Motion},
author = {Shaifali Parashar and Adrien Bartoli and Daniel Pizarro},
journal= {arXiv preprint arXiv:2010.04690},
year = {2021}
}
备注
Accepted in TPAMI 2021