Sketchformer：基于Transformer的草图结构表征
计算机视觉与模式识别
2020-02-25 v1
摘要
Sketchformer是一种新颖的基于Transformer的表征，用于以矢量形式（即作为笔画序列）编码手绘草图输入。Sketchformer有效应对多项任务：草图分类、基于草图的图像检索(SBIR)，以及草图的重建与插值。我们报告了探索连续与令牌化输入表征的若干变体，并对比了它们的性能。我们由字典学习令牌化方案驱动的所学嵌入，在与由LSTM序列到序列架构（SketchRNN及其衍生模型）驱动的基线表征相比时，在分类和图像检索任务中取得了最先进(state of the art)性能。我们表明，对于具有较长笔画序列的复杂草图，Sketchformer嵌入显著改善了草图重建与插值。
引用
@article{arxiv.2002.10381,
title = {Sketchformer: Transformer-based Representation for Sketched Structure},
author = {Leo Sampaio Ferraz Ribeiro and Tu Bui and John Collomosse and Moacir Ponti},
journal= {arXiv preprint arXiv:2002.10381},
year = {2020}
}
备注
Accepted for publication at CVPR 2020