我能教机器人复现线描画吗
计算机视觉与模式识别
2020-11-16 v1 机器学习
摘要
线描画可以说是最基本且最通用的表达形式之一。我们提出一种流水线,使机器人能够观看灰度线描画并重新绘制它。我们流水线的关键新颖要素为:a) 我们提出模仿线描画这一新任务;b) 为解决该流水线,我们修改Quick-draw数据集以获得将线描画转换为一系列笔画的有监督训练;c) 我们提出一种多阶段分割与图解释流水线来解决该问题。所得方法也已部署于CNC绘图仪与机械臂上。我们训练了所提方法的若干变体,并在取自Quick-draw的数据集上进行了评估。通过最佳方法,我们观察到该任务的准确率约为98%,相较我们所借鉴的基线架构有显著提升。因此,这允许将该 method 可靠地部署于机器人上以复现线描画。我们还表明,尽管基于规则的矢量化方法对简单图形已足够,但其在更复杂的草图上会失败,而我们的方法能很好地泛化到更复杂的分布。
引用
@article{arxiv.1910.07860,
title = {Can I teach a robot to replicate a line art},
author = {Raghav Brahmadesam Venkataramaiyer and Subham Kumar and Vinay P. Namboodiri},
journal= {arXiv preprint arXiv:1910.07860},
year = {2020}
}
备注
9 pages, Accepted for the 2020 Winter Conference on Applications of Computer Vision (WACV '20); Supplementary Video: https://youtu.be/nMt5Dw04XhY