MultiDreamer3D:基于概念感知扩散引导的多概念 3D 定制化
计算机视觉与模式识别
2025-01-24 v1
摘要
虽然已有研究聚焦于单概念 3D 定制化,但多概念定制化仍属未被充分探索的领域。为此,我们提出 MultiDreamer3D 方案,能够以分而治之的方式生成连贯的多概念 3D 内容。首先,利用基于大语言模型的布局控制器生成 3D 边界框。随后,选择性点云生成器为每个概念创建粗糙点云。这些点云被置入 3D 边界框中,并带概念标签初始化为 3D 高斯溅射,以实现 2D 投影中概念归属的精确定位。最后,通过概念感知区间得分匹配进行 3D 高斯的细化,由概念感知扩散引导。我们的实验结果表明,MultiDreamer3D 不仅确保对象存在,保留了每个概念的独特身份,还成功处理了属性变更或相互作用等复杂情况。据我们所知,这是首次针对 3D 中的多概念定制化进行研究。
引用
@article{arxiv.2501.13449,
title = {MultiDreamer3D: Multi-concept 3D Customization with Concept-Aware Diffusion Guidance},
author = {Wooseok Song and Seunggyu Chang and Jaejun Yoo},
journal= {arXiv preprint arXiv:2501.13449},
year = {2025}
}
备注
9 pages