AnyHome：结构化与纹理化3D家居的开放词汇生成
计算机视觉与模式识别
2024-07-30 v3 人工智能
图形学
摘要
受认知理论启发，我们引入了AnyHome，一个能将任意文本转化为房屋尺度上结构良好且带纹理的室内场景的框架。通过使用设计的模板提示大型语言模型（LLMs），我们的方法将提供的文本叙述转换为非模态结构化表示。这些表示通过指导在定义约束内合成几何网格，保证了空间布局的一致性和真实性。然后采用分数蒸馏采样过程来优化几何结构，随后进行以自我为中心的内部绘制过程，为其添加逼真的纹理。AnyHome以其可编辑性、可定制性、多样性和逼真度脱颖而出。场景的结构化表示允许在不同粒度级别上进行广泛编辑。AnyHome能够解读从简单标签到详细叙述的文本，生成详细的几何结构和纹理，在定量和定性评估上均优于现有方法。
引用
@article{arxiv.2312.06644,
title = {AnyHome: Open-Vocabulary Generation of Structured and Textured 3D Homes},
author = {Rao Fu and Zehao Wen and Zichen Liu and Srinath Sridhar},
journal= {arXiv preprint arXiv:2312.06644},
year = {2024}
}
备注
accepted by ECCV 2024