无模板的可 articulated 高斯溅写用于实时可重复动态视图合成
计算机视觉与模式识别
2024-12-10 v1
摘要
虽然动态场景的新视角合成取得了显著进展,但从视频中自动发现物体的骨架模型并对其重新姿态化仍是一个具有挑战性的任务。为此,本文提出了一种 novel 方法,自动从视频中发现动态对象的关联骨架模型,无需物体特定模板。我们的方法利用 3D 高斯溅写(Gaussian Splatting)和 superpoints 重建动态对象。将 superpoints 视为刚性部件,可通过直观线索发现潜在的骨架模型并采用运动学模型进行优化。此外,应用自适应控制策略以避免产生冗余的 superpoints。广泛的实验表明,我们的方法在获取可重复的 3D 对象方面具有有效性和效率。不仅实现了卓越的视觉保真度,而且允许实时渲染高分辨率图像。
引用
@article{arxiv.2412.05570,
title = {Template-free Articulated Gaussian Splatting for Real-time Reposable Dynamic View Synthesis},
author = {Diwen Wan and Yuxiang Wang and Ruijie Lu and Gang Zeng},
journal= {arXiv preprint arXiv:2412.05570},
year = {2024}
}
备注
Accepted by NeurIPS 2024