GASPACHO: 用于可控人类与物体的高斯溅射
计算机视觉与模式识别
2025-12-17 v2
摘要
我们提出了GASPACHO，一种从多视角RGB视频生成照片级真实、可控的人类-物体交互渲染的方法。与仅重建人类并将物体视为背景的先前工作不同，GASPACHO同时恢复了人类和交互物体的可动画化模板，分别作为高斯体的不同集合，从而允许从新相机视角以不同姿态渲染新颖的人类-物体交互。我们提出了一种新颖的公式，在底层2D曲面流形上而非3D体积中学习物体高斯体，从而为动态物体重建产生更清晰、精细的物体细节。我们进一步提出了高斯空间中的接触约束，以正则化人类-物体关系并实现自然、物理上合理的动画。在三个基准测试——BEHAVE、NeuralDome和DNA-Rendering——上，GASPACHO在严重遮挡下实现了高质量重建，并支持新颖人类-物体交互的可控合成。我们还展示了该方法允许在3D场景中组合人类和物体，并首次展示了神经渲染可用于在多样化场景中生成与动态物体交互的照片级真实人类。我们的结果可在以下网址获取：https://miraymen.github.io/gaspacho/
引用
@article{arxiv.2503.09342,
title = {GASPACHO: Gaussian Splatting for Controllable Humans and Objects},
author = {Aymen Mir and Arthur Moreau and Helisa Dhamo and Zhensong Zhang and Gerard Pons-Moll and Eduardo Pérez-Pellitero},
journal= {arXiv preprint arXiv:2503.09342},
year = {2025}
}
备注
Project Page: https://miraymen.github.io/gaspacho/