GaussianDreamerPro：高质量可操控3D高斯
计算机视觉与模式识别
2024-06-27 v1 图形学
摘要
最近，3D高斯溶解（3D-GS）在重建和渲染真实场景方面取得了很大成功。为了将高渲染质量转移到生成任务中，一系列研究工作尝试从文本生成3D高斯资产。但生成的资产未能达到重建任务中相同的质量。我们观察到，随着生成过程的进行，高斯会不受控制地增长，这可能导致不确定性。旨在显著提升生成质量，我们提出了一种新框架，称为GaussianDreamerPro。主要思想是将高斯绑定到合理的几何形状，该形状在整个生成过程中演化。沿着我们框架的不同阶段，几何和外观都可以逐步丰富。最终输出的资产由绑定网格的3D高斯构成，显示出与先前方法相比的显着细节和质量提升。值得注意的是，生成的资产还可以无缝集成到下游操控管道中，例如动画、合成和仿真等，大大推动了其在广泛应用中的潜力。演示可在 https://taoranyi.com/gaussiandreamerpro/ 查看。
引用
@article{arxiv.2406.18462,
title = {GaussianDreamerPro: Text to Manipulable 3D Gaussians with Highly Enhanced Quality},
author = {Taoran Yi and Jiemin Fang and Zanwei Zhou and Junjie Wang and Guanjun Wu and Lingxi Xie and Xiaopeng Zhang and Wenyu Liu and Xinggang Wang and Qi Tian},
journal= {arXiv preprint arXiv:2406.18462},
year = {2024}
}
备注
Project page: https://taoranyi.com/gaussiandreamerpro/