教智能体逐部分绘制草图
人工智能
2026-04-27 v2 计算机视觉与模式识别
图形学
机器学习
摘要
我们发展了一种逐部分生成矢量草图的方法。为此，我们使用一种新颖的多轮过程-奖励强化学习方法，对基于多模态语言模型的智能体进行训练。我们的做法得益于我们构建的名为 ControlSketch-Part 的新型数据集，其中包含草图的丰富的分部级注释，采用一种新颖的通用自动注释管道获得：该管道将矢量草图分割为语义部分并为各部分分配路径，经过结构化的多阶段标注过程。我们的结果表明，融入结构化的分部级数据并通过过程中的视觉反馈为智能体提供了可解释、可控且可局部编辑的文本到矢量草图生成能力。
引用
@article{arxiv.2603.19500,
title = {Teaching an Agent to Sketch One Part at a Time},
author = {Xiaodan Du and Ruize Xu and David Yunis and Yael Vinker and Greg Shakhnarovich},
journal= {arXiv preprint arXiv:2603.19500},
year = {2026}
}