HandSCS: 可动画手部高斯溅射的结构坐标空间
计算机视觉与模式识别
2025-12-23 v2
摘要
从多视角图像创建可动画手部 avatar 需要建模复杂的关节运动,并在实时中保持跨姿态的结构一致性。我们提出了 HandSCS,一个用于高精度手部动画的结构引导三维高斯溅射框架。与现有方法将所有高斯条件化于同一全局姿态参数不同——这对于高度关节化的手部来说是不充分的——HandSCS 为每个高斯提供了来自姿态内和姿态间两个视角的显式结构引导。为了建立姿态内的结构引导,我们引入了结构坐标空间(SCS),通过混合静态-动态坐标基和角度-径向描述符来连接稀疏骨骼与密集高斯。为了提高跨姿态一致性,我们进一步引入了姿态间一致性损失,在相似关节运动下促进高斯属性的一致性。这些组件共同实现了高保真结果,并保持一致的精细细节,即使在具有挑战性的高变形和自接触区域也是如此。在 InterHand2.6M 数据集上的实验表明 HandSCS 达到了手部 avatar 动画的最先进性能,证实了显式结构建模的有效性。
引用
@article{arxiv.2503.14736,
title = {HandSCS: Structural Coordinate Space for Animatable Hand Gaussian Splatting},
author = {Yilan Dong and Wenqing Wang and Qing Wang and Jiahao Yang and Haohe Liu and Xiatuan Zhu and Gregory Slabaugh and Shanxin Yuan},
journal= {arXiv preprint arXiv:2503.14736},
year = {2025}
}