Texture-GS: 解耦几何与纹理以实现3D高斯泼溅编辑
计算机视觉与模式识别
2024-03-18 v1
摘要
3D高斯泼溅作为一种开创性方法，因其高保真重建和实时渲染的能力而受到越来越多的关注。然而，它将场景的外观和几何耦合在高斯属性中，这阻碍了编辑操作（如纹理交换）的灵活性。为了解决这个问题，我们提出了一种新颖的方法，即Texture-GS，通过将外观表示为映射到3D表面上的2D纹理，从而将外观与几何解耦，进而便于外观编辑。在技术上，这种解耦是通过我们提出的纹理映射模块实现的，该模块由一个用于学习3D高斯中心UV坐标的UV映射MLP、一个用于高效近似射线-高斯交点UV坐标的MLP局部泰勒展开，以及一个用于捕获细粒度外观的可学习纹理组成。在DTU数据集上的大量实验表明，我们的方法不仅促进了高保真外观编辑，而且在消费级设备（例如单个RTX 2080 Ti GPU）上实现了实时渲染。
引用
@article{arxiv.2403.10050,
title = {Texture-GS: Disentangling the Geometry and Texture for 3D Gaussian Splatting Editing},
author = {Tian-Xing Xu and Wenbo Hu and Yu-Kun Lai and Ying Shan and Song-Hai Zhang},
journal= {arXiv preprint arXiv:2403.10050},
year = {2024}
}