SketcherX：基于扩散模型和矢量化技术的 AI 驱动交互式机器人绘画

我们介绍了 SketcherX，这是一个通过人机互动实现个性化肖像绘画的新型机器人系统。不同于传统机器人艺术系统依赖类比打印技术，SketcherX 捕获并处理面部图像，以产生独特的、类似人类的艺术风格的矢量化绘画。系统由两台 6 轴机器人臂构成：一台面部机器人配备头部摄像头和大型语言模型 (LLM) 实现实时交互，另一台绘画机器人利用微调的扩散模型、ControlNet 和视觉语言模型进行动态、风格化绘画。我们的贡献包括开发自定义矢量低秩适配模型 (LoRA)，实现对各种艺术风格的无缝适配，并集成成对微调方法以提高笔画质量和风格准确性。实验结果表明，该系统能在两分钟内产出高质量、个性化肖像，凸显其作为机器人创意新范式的潜力。本工作推动了机器人艺术领域的发展，将机器人定位为创作过程的积极参与者，为人机交互式艺术合作的未来探索铺平了道路。