TexGaussian:基于八叉树3D高斯溅写的高质量PBR材料生成
计算机视觉与模式识别
2025-03-25 v2 图形学
摘要
物理光源渲染(PBR)材料在现代图raphics中发挥着关键作用,使其能够在多样化的环境图中实现照片级渲染。开发一种有效且高效的算法,能够自动生成高质量的PBR材料而非RGB纹理,对3D网格具有显著优势,可显著简化3D内容的创建过程。大多数现有方法利用预训练的2D扩散模型进行多视角图像合成,常常导致生成纹理与输入3D网格之间严重不一致。本文提出了TexGaussian,一种新颖的方法,利用八叉树对齐的3D高斯溅写进行快速PBR材料生成。具体而言,我们将每个3D高斯置于从输入3D网格构建的八叉树最细叶节点的位置,用于渲染不仅用于拍摄地图,还用于粗糙度和金属度。此外,我们的模型以回归方式进行训练而非扩散去噪,能够在单个前向传递过程中为3D网格生成PBR材料。大量实验在公开可用的基准数据集上进行,表明我们的方法在无条件和文本条件场景下合成的PBR材料在视觉上更令人满意,且运行速度更快,具有更好的几何一致性。我们的代码和训练好的模型可在 https://3d-aigc.github.io/TexGaussian 查看。
引用
@article{arxiv.2411.19654,
title = {TexGaussian: Generating High-quality PBR Material via Octree-based 3D Gaussian Splatting},
author = {Bojun Xiong and Jialun Liu and Jiakui Hu and Chenming Wu and Jinbo Wu and Xing Liu and Chen Zhao and Errui Ding and Zhouhui Lian},
journal= {arXiv preprint arXiv:2411.19654},
year = {2025}
}
备注
CVPR 2025. Project Page: https://3d-aigc.github.io/TexGaussian