InsTex:室内场景风格化纹理合成
计算机视觉与模式识别
2025-01-27 v1 图形学
机器学习
摘要
为 3D 场景生成高质量纹理对于室内设计、游戏和增强/虚拟现实 (AR/VR) 应用程序至关重要。尽管最近在 3D 生成模型方面的进展增强了内容创建,但在实现广泛泛化和保持多个视角间的风格一致性方面仍存在挑战。当前方法,如针对 3D 纹理化的 2D 扩散模型, suffer于处理时间长且出现视觉伪影;而以 3D 数据驱动的方法往往难以有效泛化。为克服这些挑战,我们引入了 InsTex,一个用于生成 3D 室内场景高质量、风格一致纹理的两阶段架构。InsTex 利用深度到图像扩散先验构建粗到细的管线,首先通过预训练的 2D 扩散模型生成多视角图像,然后对纹理进行细化以确保一致性。我们的方法支持文本和视觉提示,在视觉质量和定量指标方面实现了最先进的效果,并在 various 3D 纹理化应用中展示了其有效性。
引用
@article{arxiv.2501.13969,
title = {InsTex: Indoor Scenes Stylized Texture Synthesis},
author = {Yunfan Zhang and Zhiwei Xiong and Zhiqi Shen and Guosheng Lin and Hao Wang and Nicolas Vun},
journal= {arXiv preprint arXiv:2501.13969},
year = {2025}
}