中文

PICASSO:基于渲染自监督的二维 CAD 草图参数化的前馈框架

计算机视觉与模式识别 2024-12-06 v2

摘要

本工作提出了 PICASSO 框架,用于从手绘草图和精确草图图像中对 2D CAD 草图进行参数化。PICASSO 将给定的 CAD 草图图像转换为可无缝集成到 CAD 软件中的参数化原始图形。我们的框架利用渲染自监督机制,使仅使用草图渲染图像即可预训练 CAD 草图参数化网络,从而无需对应的 CAD 参数化。因此,我们显著减少了对参数级别标注的依赖,这些标注常常不可得,尤其是对于手绘草图而言。PICASSO 的两个主要组件包括:(1) 草图参数化网络(SPN),用于从 CAD 草图图像预测一系列参数化原始图形;(2) 草图渲染网络(SRN),以可微方式渲染参数化 CAD 草图,并用于计算渲染(图像级)损失以实现自监督。我们展示,所提出的 PICASSO 即使仅使用少量参数化 CAD 草图进行微调,也能实现令人满意的性能。在广泛使用的 SketchGraphs 和 CAD as Language 数据集上进行了大规模评估,验证了该方法在零样本和少样本学习场景中的有效性。

关键词

引用

@article{arxiv.2407.13394,
  title  = {PICASSO: A Feed-Forward Framework for Parametric Inference of CAD Sketches via Rendering Self-Supervision},
  author = {Ahmet Serdar Karadeniz and Dimitrios Mallis and Nesryne Mejri and Kseniya Cherenkova and Anis Kacem and Djamila Aouada},
  journal= {arXiv preprint arXiv:2407.13394},
  year   = {2024}
}

备注

Accepted at WACV 2025