中文

ToMiE:用于重建复杂3D人类模型的显式外骨骼方法

计算机视觉与模式识别 2025-06-27 v2

摘要

本文强调了3D人类任务中常被忽视的关键因素,即对带有手持物品或松散衣物的复杂3D人类的建模。虽然已知SMPL的参数化公式能够贴合人体皮肤,但手持物品和松散衣物在统一框架内难以建模,因为它们的运动通常与人体身体解耦。为增强SMPL骨架在此情况下的能力,我们提出了一种使骨架子树自适应扩张的增长策略。具体而言,我们的方法称为ToMiE,包括父关节定位和外部关节优化。对于父关节定位,我们采用基于LBS混合权重和运动核函数的梯度方法。一旦获得外部关节,我们便在不同帧中对其变换进行SE(3)优化,以实现渲染和显式动画。ToMiE在各种带有手持物品和松散衣物的情况下,不仅在渲染质量方面优于其他方法,还通过提供 grown 关节的自由动画,提升了SMPL骨架的表达能力,适用于更广泛的应用场景。

关键词

引用

@article{arxiv.2410.08082,
  title  = {ToMiE: Towards Explicit Exoskeleton for the Reconstruction of Complicated 3D Human Avatars},
  author = {Yifan Zhan and Qingtian Zhu and Muyao Niu and Mingze Ma and Jiancheng Zhao and Zhihang Zhong and Xiao Sun and Yu Qiao and Yinqiang Zheng},
  journal= {arXiv preprint arXiv:2410.08082},
  year   = {2025}
}