FocalDreamer：基于焦点融合组装的文本驱动三维编辑
计算机视觉与模式识别
2023-08-23 v2 图形学
机器学习
摘要
尽管文本到三维编辑在利用分数蒸馏采样方面取得了显著进展，现有方法仍难以提供内容创作所需的可分离、精确且一致的结果。为此，我们提出 FocalDreamer，一个根据文本提示将基础形状与可编辑部件相融合、在目标区域内实现细粒度编辑的框架。具体而言，借助几何并集与双路径渲染，FocalDreamer 将独立的 3D 部件组装为完整对象，便于实例复用与部件级控制。我们提出几何焦点损失与风格一致性正则化，以促进焦点融合与整体外观的协调。此外，FocalDreamer 生成高保真几何与 PBR 纹理，可兼容广泛使用的图形引擎。大量实验在定量与定性评估中均凸显了 FocalDreamer 卓越的编辑能力。
引用
@article{arxiv.2308.10608,
title = {FocalDreamer: Text-driven 3D Editing via Focal-fusion Assembly},
author = {Yuhan Li and Yishun Dou and Yue Shi and Yu Lei and Xuanhong Chen and Yi Zhang and Peng Zhou and Bingbing Ni},
journal= {arXiv preprint arXiv:2308.10608},
year = {2023}
}
备注
Project website: https://focaldreamer.github.io