GarmentCrafter：单视图 3D 服装重建与编辑的渐进式新视角合成
计算机视觉与模式识别
2025-03-13 v2
摘要
我们介绍 GarmentCrafter，一种新方法，使非专业用户能够从单视图图像创建和修改 3D 服装。虽然近期图像生成技术的进展促进了 2D 服装设计，但创建和编辑 3D 服装仍对非专业用户具有挑战。现有的单视图 3D 重建方法常依赖预训练生成模型在参考图像和相机姿态条件下合成新视角，但缺乏跨视角一致性，无法捕捉不同视角之间的内部关系。本文通过渐进式深度预测和图像扭曲来近似新视角。随后，我们训练一个多视角扩散模型以完成被遮挡和未知服装区域，依据不断演化的相机姿态。通过联合推断 RGB 和深度，GarmentCrafter 实现视角间一致性，重建精确的几何结构和细节。广泛的实验表明，我们的方法在视觉保真度和视角一致性方面优于最新的单视图 3D 服装重建方法。
引用
@article{arxiv.2503.08677,
title = {OmniPaint: Mastering Object-Oriented Editing via Disentangled Insertion-Removal Inpainting},
author = {Yongsheng Yu and Ziyun Zeng and Haitian Zheng and Jiebo Luo},
journal= {arXiv preprint arXiv:2503.08677},
year = {2025}
}