面向LLM-Agent的用户界面：一篇立场论文
人机交互
2024-09-24 v2 人工智能
摘要
大型语言模型（Large Language Model, LLM）嵌入式应用已被证明能够有效地解释用户的命令，制定计划，并据此操作外部工具/系统。然而，LLM代理的操作范围局限于被动地遵循用户，要求用户就底层工具/系统的使用方式进行框架化表述。我们注意到，LLM-Agent用户界面（LLM-Agent User Interface, LAUI）的潜力更大。用户若对底层工具/系统不熟悉，应能够通过LAUI发现潜在的工作流程。与传统通过可探索的GUI教用户使用预定义系统方式的设计不同，在理想的LAUI中，LLM代理被初始化为熟悉该系统，主动研究用户及其需求，并向用户提出新的交互方案。为说明LAUI，我们提出Flute X GPT，一个具体的例子，利用LLM代理、提示管理器和尺弦教学多模态软件硬件系统，以促进学习尺弦的复杂实时用户体验。
引用
@article{arxiv.2405.13050,
title = {Human-Centered LLM-Agent User Interface: A Position Paper},
author = {Daniel Chin and Yuxuan Wang and Gus Xia},
journal= {arXiv preprint arXiv:2405.13050},
year = {2024}
}