中文

基于自由手绘草图上眼动注视的物体类别理解

计算机视觉与模式识别 2017-08-09 v1 人工智能

摘要

对照片图像上眼动注视的研究是一个活跃的研究领域。相比之下,自由手绘草图这一图像子类别在此类研究中未受太多关注。在本文中,我们分析了在分布于160个物体类别的3904幅自由手绘草图上进行的自由观看注视研究的结果。我们的分析表明,注视序列在单幅草图内、同一类别的不同草图之间、甚至适当分组的类别集之间都表现出显著的一致性。考虑到手绘物体草图特有的描绘可变性与极端的图像内容稀疏性,这种多级一致性是引人注目的。在本文中,我们展示了注视数据中的多级一致性可用于(a)仅给定测试草图的注视序列来预测其类别,以及(b)构建一个预测物体上注视底层部件标签的计算模型。我们希望我们的发现能激励学界认为类草图表示值得进行基于注视的研究,相对于照片图像而言。

关键词

引用

@article{arxiv.1703.06554,
  title  = {Object category understanding via eye fixations on freehand sketches},
  author = {Ravi Kiran Sarvadevabhatla and Sudharshan Suresh and R. Venkatesh Babu},
  journal= {arXiv preprint arXiv:1703.06554},
  year   = {2017}
}

备注

Accepted for publication in Transactions on Image Processing (http://ieeexplore.ieee.org/document/7866001/)