Diff3DS:通过可微曲线渲染生成视图一致的 3D 草图
计算机视觉与模式识别
2025-03-11 v2
摘要
3D 草图广泛用于直观地表示物体或场景的 3D 形状和结构。然而,3D 草图的创建需要用户具备专业的艺术技能。现有研究主要致力于增强 3D 虚拟系统中交互式草图生成能力。本文提出了 Diff3DS,一种用于通过优化不同监督下的 3D 参数化曲线来生成视图一致 3D 草图的可微渲染框架。具体而言,我们对 3D 仿射 B\'ezier 曲线进行透视投影以生成 2D 曲线,然后通过定制的可微光栅化器将其转换为 2D 栅格图像。我们的框架桥接了 3D 草图和栅格图像的领域,实现了通过计算 2D 图像域中的梯度来完成 3D 草图的端到端优化。我们的 Diff3DS 可支持一系列新的 3D 草图生成任务,包括文本到 3D 草图和图像到 3D 草图,基于流行的蒸馏式监督(如 Score Distillation Sampling, SDS)。广泛的实验结果表明,我们的框架取得了有前景的效果,展示了其潜力。项目页面位于 https://yiboz2001.github.io/Diff3DS/。
引用
@article{arxiv.2405.15305,
title = {Diff3DS: Generating View-Consistent 3D Sketch via Differentiable Curve Rendering},
author = {Yibo Zhang and Lihong Wang and Changqing Zou and Tieru Wu and Rui Ma},
journal= {arXiv preprint arXiv:2405.15305},
year = {2025}
}
备注
ICLR 2025