使用大语言模型对 UI 原型生成自动反馈
人机交互
2024-03-21 v1
摘要
对用户界面 (UI) 原型的反馈在设计至关重要。然而，人类反馈并非总是唾手可得。我们探索了使用大语言模型 生成自动反馈的潜力。具体而言，我们专注于应用 GPT-4 来实现启发式评估的自动化，该评估目前需要人类专家评估 UI 对一组设计准则的遵循情况。我们实现了一个 Figma 插件，它接收 UI 设计和一组书面启发式规则，并将自动生成的反馈呈现为建设性建议。我们使用三套准则评估了其在 51 个 UI 上的表现，将 GPT-4 生成的设计建议与人类专家的建议进行了比较，并与 12 位专家设计师进行了一项研究以了解其与现有实践的契合度。我们发现基于 GPT-4 的反馈在捕捉细微错误、改进文本以及考量 UI 语义方面非常有用，但反馈的效用也会随着迭代而降低。尽管其建议并不完美，参与者仍描述了该插件的多种用途。
引用
@article{arxiv.2403.13139,
title = {Generating Automatic Feedback on UI Mockups with Large Language Models},
author = {Peitong Duan and Jeremy Warner and Yang Li and Bjoern Hartmann},
journal= {arXiv preprint arXiv:2403.13139},
year = {2024}
}
备注
To appear at ACM CHI 2024