中文

ProEdit:简单分段即可实现高质量 3D 场景编辑

计算机视觉与模式识别 2024-11-08 v1

摘要

本文提出 ProEdit - 一个简单而有效的框架,用于以扩散蒸馏为导向的新颖分段方式进行高质量 3D 场景编辑。灵感来自关键观察:场景编辑中的多视角不一致源于扩散模型的大型可行输出空间 (FOS)。我们的框架控制 FOS 的大小并通过将整体编辑任务分解为几个子任务来减少不一致性,这些子任务随后在场景上逐步执行。在该框架内,我们设计了难度感知的子任务分解调度器和自适应 3D 高斯溅写 (3DGS) 训练策略,确保执行每个子任务的高质量和效率。广泛的评估显示,我们的 ProEdit 在各种场景和具有挑战性的编辑任务中实现了最先进的结果,全部通过一个简单框架实现,无需任何昂贵或复杂的附加组件,如蒸馏损失、组件或训练程序。值得注意的是,ProEdit 还提供了一种控制、预览和选择编辑操作“激进程度”的方式。

关键词

引用

@article{arxiv.2411.05006,
  title  = {ProEdit: Simple Progression is All You Need for High-Quality 3D Scene Editing},
  author = {Jun-Kun Chen and Yu-Xiong Wang},
  journal= {arXiv preprint arXiv:2411.05006},
  year   = {2024}
}

备注

NeurIPS 2024. Project Page: https://immortalco.github.io/ProEdit/