MatAtlas：文本驱动的致几何纹理与材质分配一致性
计算机视觉与模式识别
2024-04-23 v2 图形学
摘要
我们提出了 MatAtlas，一种用于一致的文本引导 3D 模型纹理化的方法。遵循近期进展，我们利用大规模文本到图像生成模型（例如 Stable Diffusion）作为先验来对 3D 模型进行纹理化。我们精心设计了一个 RGB 纹理流水线，利用由深度和边缘驱动的网格图案扩散。通过提出多步纹理细化过程，我们显著提高了纹理输出的质量和 3D 一致性。为了进一步解决烘焙光照问题，我们超越 RGB 颜色，致力于为资产分配参数化材质。给定高质量的初始 RGB 纹理，我们提出了一种基于大型语言模型（LLM）的新颖材质检索方法，实现了可编辑性和可重照性。我们在多种几何体上评估了我们的方法，并表明我们的方法显著优于先前的工作。我们还通过详细的消融研究分析了每个组件的作用。
引用
@article{arxiv.2404.02899,
title = {MatAtlas: Text-driven Consistent Geometry Texturing and Material Assignment},
author = {Duygu Ceylan and Valentin Deschaintre and Thibault Groueix and Rosalie Martin and Chun-Hao Huang and Romain Rouffet and Vladimir Kim and Gaëtan Lassagne},
journal= {arXiv preprint arXiv:2404.02899},
year = {2024}
}