GuideWeb:基于真实网页 UI 的自动化应用内指南生成基准
计算与语言
2026-02-03 v1
摘要
数字采用平台(DAP)提供基于网页的覆盖层,用于向用户提供操作指导和上下文提示,以帮助用户导航复杂网站。虽然现代 DAP 工具使非专业人员能够编写此类指南,但由于网站布局和功能不断演变,维持这些指南仍需要大量人力——这需要重复的手动更新和重新标注。在本工作中,我们引入 GuideWeb,这是一个用于真实网页 UI 上自动化应用内指南生成的新基准。GuideWeb 将任务形式化为通过选择以网页为基础的指南目标元素,并生成与用户意图一致的简洁指南文本来产生页面级指南。我们还提出了综合的评估套件,联合衡量指南目标元素选择的准确性以及生成意图和指南文本的质量。实验表明,我们提出的 GuideWeb Agent 在指南目标元素预测方面实现了 30.79% 的准确率,意图生成获得 BLEU 为 44.94 的分数,指南文本生成获得 BLEU 为 21.34 的分数。现有基线性能大幅落后,这表明自动化指南生成仍具有挑战性,进一步的进展在实用场景中部署此类系统之前仍是必要的。
引用
@article{arxiv.2602.01917,
title = {GuideWeb: A Benchmark for Automatic In-App Guide Generation on Real-World Web UIs},
author = {Chengguang Gan and Yoshihiro Tsujii and Yunhao Liang and Tatsunori Mori and Shiwen Ni and Hiroki Itoh},
journal= {arXiv preprint arXiv:2602.01917},
year = {2026}
}