PIANO:基于磁共振成像的参数化手部骨骼模型
计算机视觉与模式识别
2021-06-22 v1
摘要
手部建模对于沉浸式 VR/AR、动作理解或人类医疗保健至关重要。现有的参数化模型仅考虑手部形状、姿态或纹理,而未对骨骼等解剖属性进行建模,而骨骼对于真实的手部生物力学分析是必不可少的。本文提出 PIANO,首个基于 MRI 数据的参数化人手骨骼模型。我们的 PIANO 模型在生物学上正确、易于驱动且可微,相比仅基于外表面的传统手部模型,以数据驱动的方式实现了更精确的手部内部运动结构解剖建模。此外,我们的 PIANO 模型可应用于神经网络层,以支持带有细粒度语义损失的训练,从而开启了从 MRI 甚至 RGB 图像中进行数据驱动的细粒度手部骨骼解剖与语义理解的新任务。我们公开了我们的模型。
引用
@article{arxiv.2106.10893,
title = {PIANO: A Parametric Hand Bone Model from Magnetic Resonance Imaging},
author = {Yuwei Li and Minye Wu and Yuyao Zhang and Lan Xu and Jingyi Yu},
journal= {arXiv preprint arXiv:2106.10893},
year = {2021}
}
备注
Accepted to IJCAI 2021