中文

PSDoodle:通过局部屏幕涂鸦实现快速应用界面搜索

软件工程 2022-04-08 v2

摘要

在当前,从已有资源库中搜索特定的移动应用界面设计要么缓慢要么繁琐。这类搜索要么局限于基本关键词搜索(如 Google 图像搜索),要么需要输入一张完整的查询屏幕图像(如 SWIRE)。一种有前景的替代方案是交互式局部草图绘制,它比关键词搜索更有结构,且比完整屏幕查询更快。PSDoodle 是首个支持通过交互式草图绘制进行界面交互搜索的系统。PSDoodle 构建于以下基础之上:约 5.8 万张 Android 应用界面的 Rico 资源库、图标级涂鸦的 Google QuickDraw 数据集,以及 DoodleUINet——一个从数百人处收集的约 1 万张应用图标涂鸦的精选语料库。在我们与第三方软件开发者的评估中,PSDoodle 提供了与 SWIRE 系列工作中最先进方法相似的 top-10 界面检索准确率,同时将所需平均时间削减约一半。

关键词

引用

@article{arxiv.2204.01956,
  title  = {PSDoodle: Fast App Screen Search via Partial Screen Doodle},
  author = {Soumik Mohian and Christoph Csallner},
  journal= {arXiv preprint arXiv:2204.01956},
  year   = {2022}
}