LiveSketch：用于引导式基于草图视觉搜索的查询扰动方法
计算机视觉与模式识别
2019-04-16 v1 人工智能
信息检索
摘要
LiveSketch 是一种利用手绘草图查询来搜索大型图像集合的新颖算法。LiveSketch 通过生成视觉建议来扩充绘制过程中的查询，从而解决草图搜索固有的模糊性，使查询指定成为一个迭代而非一次性的过程，有助于消除用户搜索意图的歧义。我们的技术贡献包括：一种结合基于 RNN 的变分自编码器以使用矢量（基于笔画）查询搜索图像的三元组卷积网络架构；用于识别可能搜索意图（从而在搜索嵌入中定位目标）的实时聚类；以及利用来自这些目标的反向传播来扰动输入笔画序列，从而建议修改查询以引导搜索。我们使用 6700 万图像语料库展示了相对于当代基线在准确率和任务完成时间上的改进。
引用
@article{arxiv.1904.06611,
title = {LiveSketch: Query Perturbations for Guided Sketch-based Visual Search},
author = {John Collomosse and Tu Bui and Hailin Jin},
journal= {arXiv preprint arXiv:1904.06611},
year = {2019}
}
备注
Accepted to CVPR 2019