梦中绘画:使用风格化得分蒸馏进行文本到3D生成
计算机视觉与模式识别
2025-02-14 v2 图形学
摘要
我们提出一种生成带风格的3D对象的方法。该方法以文本提示和风格参考图像为输入,并构建一个神经辐射场(neural radiance field)来综合与文本提示一致的内容,同时遵循参考图像的风格。为同时完成3D对象的生成和风格迁移,我们提出了一种风格化得分蒸馏损失,用于引导文本到3D优化过程,以输出视觉上合理的几何和外观。我们的风格化得分蒸馏基于原始预训练文本到图像模型及其修改后的兄弟模型,关键在于操作自注意力层的关键和值特征,以注入参考图像中的风格。与最先进的方法进行比较,实验结果显示我们的方法在视觉性能方面表现突出,用户研究的定量结果也进一步支持了这一点。
引用
@article{arxiv.2406.18581,
title = {Dream-in-Style: Text-to-3D Generation Using Stylized Score Distillation},
author = {Hubert Kompanowski and Binh-Son Hua},
journal= {arXiv preprint arXiv:2406.18581},
year = {2025}
}