中文

MHR-Net:从2D视图进行非刚性形状多重假设重建

计算机视觉与模式识别 2023-01-13 v2

摘要

我们提出MHR-Net,一种用于从运动恢复非刚性形状(NRSfM)的新方法。MHR-Net旨在为2D视图找到一组合理的重建结果,并从中选择最可能的重建。为应对非刚性形状无监督生成的挑战,我们在MHR-Net中开发了一种新的确定性基与随机形变方案。非刚性形状首先表示为粗形状基与柔性形变的叠加,然后通过形变部分的不确定性建模生成多个假设。MHR-Net在基和最佳假设上以重投影损失进行优化。此外,我们设计了一种新的Procrustean残差损失,减少了相似形状间的刚性旋转并进一步提升性能。实验表明,MHR-Net在Human3.6M、SURREAL和300-VW数据集上达到了SOTA的重建精度。

关键词

引用

@article{arxiv.2207.09086,
  title  = {MHR-Net: Multiple-Hypothesis Reconstruction of Non-Rigid Shapes from 2D Views},
  author = {Haitian Zeng and Xin Yu and Jiaxu Miao and Yi Yang},
  journal= {arXiv preprint arXiv:2207.09086},
  year   = {2023}
}

备注

Accepted to ECCV 2022; code: https://github.com/haitianzeng/MHR-Net