Deep3DSketch++:基于单张手绘草图的高保真三维建模
人机交互
2023-10-30 v1
摘要
AR/VR 的兴起导致对 3D 内容的需求增长。然而,使用计算机辅助设计(CAD)创建 3D 内容的传统方法费时费力且需要专业技能,难以被新手用户使用。基于草图的三维建模通过利用人机交互的直观性提供了一种有前景的解决方案。但由于草图的稀疏性和模糊性,生成准确反映创作者意图的高质量内容具有挑战性。此外,新手用户常发现难以从多个视角绘制准确图形,或遵循现有方法中的逐步指令。为此,我们在工作中引入了一种开创性的端到端方法,支持从单张自由手绘草图进行三维建模,即 Deep3DSketch++。我们利用对称性先验和结构感知形状判别器,解决了单张草图带来的稀疏性与模糊性问题。我们在包括合成数据与真实数据在内的多样数据集上进行了全面实验,以验证方法有效性并展示其最先进(SOTA)性能。根据用户研究,用户对我们方法生成的结果也更满意。我们相信该方法有望通过为新手用户提供直观易用的方案,革新三维建模流程。
引用
@article{arxiv.2310.18178,
title = {Deep3DSketch+\+: High-Fidelity 3D Modeling from Single Free-hand Sketches},
author = {Ying Zang and Chaotao Ding and Tianrun Chen and Papa Mao and Wenjun Hu},
journal= {arXiv preprint arXiv:2310.18178},
year = {2023}
}
备注
Accepted at IEEE SMC 2023