语义保持的基于点的数字人化身
计算机视觉与模式识别
2023-11-21 v1
摘要
为了实现 AR/VR 与数字娱乐中的真实体验，我们提出了首个体现数字人全部表达范围的基于点的数字人化身模型。我们采用两个 MLP 来建模姿态相关形变与线性蒙皮（LBS）权重。外观的表示依赖于一个解码器以及附着于每个点的特征。与替代性的隐式方法相比，有向点表示不仅提供了更直观的数字人化身动画建模方式，还显著减少了训练与推理时间。此外，我们提出了一种将语义信息从 SMPL-X 模型迁移到各点上的新方法，从而更好地理解人体运动。通过利用点的语义信息，我们可以通过在不同对象间交换同类别的点来实现虚拟试穿与数字人化身组合。实验结果证明了我们所提方法的有效性。
引用
@article{arxiv.2311.11614,
title = {Semantic-Preserved Point-based Human Avatar},
author = {Lixiang Lin and Jianke Zhu},
journal= {arXiv preprint arXiv:2311.11614},
year = {2023}
}