CharacterShot:可控且一致的4D角色动画
计算机视觉与模式识别
2025-08-12 v1
摘要
在本文中,我们提出了\textbf{CharacterShot},一个可控且一致的4D角色动画框架,使任何个体设计师都能从单个参考角色图像和2D姿态序列创建动态3D角色(即4D角色动画)。我们首先基于先进的DiT图像到视频模型预训练了一个强大的2D角色动画模型,该模型允许任何2D姿态序列作为可控信号。然后,我们通过引入双注意力模块和相机先验,将动画模型从2D提升到3D,以生成具有时空一致性和空间视图一致性的多视角视频。最后,我们在这些多视角视频上采用了一种新颖的邻域约束4D高斯溅射优化,从而产生连续且稳定的4D角色表示。此外,为了提升以角色为中心的性能,我们构建了一个大规模数据集Character4D,包含13,115个具有多样外观和动作的独特角色,并从多个视角渲染。在我们新构建的基准CharacterBench上进行的大量实验表明,我们的方法优于当前最先进的方法。代码、模型和数据集将在https://github.com/Jeoyal/CharacterShot公开。
引用
@article{arxiv.2508.07409,
title = {CharacterShot: Controllable and Consistent 4D Character Animation},
author = {Junyao Gao and Jiaxing Li and Wenran Liu and Yanhong Zeng and Fei Shen and Kai Chen and Yanan Sun and Cairong Zhao},
journal= {arXiv preprint arXiv:2508.07409},
year = {2025}
}
备注
13 pages, 10 figures. Code at https://github.com/Jeoyal/CharacterShot