中文

TIFu:面向高保真三维角色重建的三向隐式函数

计算机视觉与模式识别 2024-01-29 v1

摘要

基于隐式函数的方法近期在从单张RGB图像重建三维人体方面取得了可喜的成果。然而,这些方法不足以扩展到更一般的情况,常常生成拖拽或断开的身体部位,尤其对于动画角色而言。我们认为这些局限性源于使用了现有的点级三维形状表示,这种表示缺乏整体的三维上下文理解。基于体素的重建方法更适合一次性捕获整个三维空间,但这些方法由于内存消耗过大,对于高分辨率重建并不实用。为了解决这些挑战,我们引入了三向隐式函数(TIFu),这是一种向量级表示,它增强了全局三维一致性,同时相比体素表示显著降低了内存使用。我们还引入了一种通过沿三个正交轴聚合向量来实现任意分辨率三维重建的新算法,解决了回归固定维度向量的固有问题。我们的方法在我们自行策划的角色数据集和基准三维人体数据集上均达到了最先进的性能。我们提供了定量和定性分析来支持我们的发现。

关键词

引用

@article{arxiv.2401.14565,
  title  = {TIFu: Tri-directional Implicit Function for High-Fidelity 3D Character Reconstruction},
  author = {Byoungsung Lim and Seong-Whan Lee},
  journal= {arXiv preprint arXiv:2401.14565},
  year   = {2024}
}