基于协同控制的多视图一致PBR材质生成
计算机视觉与模式识别
2024-10-10 v1 图形学
摘要
多视图一致性是图像扩散模型的一个挑战。即使在已知几何对应关系的文本到材质问题中，许多方法仍无法在不同视图之间产生对齐的预测， necessitating non-trivial fusion methods to incorporate the results onto the original mesh。我们专为 PBR 文本到材质问题探索了这一问题。协同控制直接建模 PBR 图像概率分布，包括法线凹凸图；据我们所知，这是唯一直接输出完整 PBR 堆栈的扩散模型。我们讨论了在模型中实现多视图一致性的设计决策，并在消除法研究和实际应用中展示了我们方法的有效性。
引用
@article{arxiv.2410.06985,
title = {Jointly Generating Multi-view Consistent PBR Textures using Collaborative Control},
author = {Shimon Vainer and Konstantin Kutsy and Dante De Nigris and Ciara Rowles and Slava Elizarov and Simon Donné},
journal= {arXiv preprint arXiv:2410.06985},
year = {2024}
}
备注
19 pages, 13 figures