面向安卓手机与平板间 GUI 转换与检索的配对数据集
人机交互
2023-11-07 v3 软件工程
摘要
随着智能手机和平板的普及,用户已习惯于针对不同任务使用不同设备,例如用手机玩游戏、用平板看电影。为占领市场,同一应用常同时发布于智能手机与平板。然而,尽管某一应用在手机与平板上具有相似的图形用户界面(GUI)与功能,当前应用开发者在开发平板兼容版本时通常从零开始,这抬高了开发成本并浪费了既有设计资源。研究者正尝试将深度学习用于自动化 GUI 开发以提升开发者效率。深度学习模型高度依赖高质量数据集。目前已有若干公开的可用于手机的 GUI 页面数据集,但尚无手机与平板间的配对 GUI 数据集。这严重阻碍了深度学习在自动化 GUI 开发中的应用。本文收集并公开了 Papt 数据集,一个用于安卓手机与平板间 GUI 转换与检索的配对数据集。该数据集包含来自 5,593 对手机-平板应用的 10,035 对手机-平板 GUI 页面。我们阐述了配对数据的收集方法与该数据集的统计分析,并说明了本数据集相较于其他现有数据集的优势。通过该数据集上的初步实验,我们分析了利用深度学习进行自动化 GUI 开发的现存挑战,并发现本数据集可辅助部分深度学习模型应用于自动化 GUI 开发相关任务。
引用
@article{arxiv.2307.13225,
title = {A Pairwise Dataset for GUI Conversion and Retrieval between Android Phones and Tablets},
author = {Han Hu and Haolan Zhan and Yujin Huang and Di Liu},
journal= {arXiv preprint arXiv:2307.13225},
year = {2023}
}
备注
7 pages, 8 figures