为何约翰nie 无法使用智能体:行业抱负与用户现实之间的差距
人机交互
2026-05-05 v2
摘要
关于 "AI agents" 是什么、它们能做什么,以及它们如何有效地被其目标用户使用存在日益严重的模糊问题。我们提出了两个关键研究问题:(i) 科技行业如何构想并营销 "AI agents";(ii) 终端用户在尝试使用商业 AI 智能体实现其宣传的用途时面临什么挑战。首先,我们对 102 个商业 AI 智能体的营销用例进行系统性综述,发现它们归入三个大类:编排、创建和洞察。随后我们评估了终端用户在实际中能否实现这些营销的能力:我们对 N=31 名参与者进行可用性评估,其中他们在两款流行的商业 AI 智能体工具(Operator 和 Manus)上尝试实现这些类别的代表性任务。我们发现用户对这些智能体 generally 印象深刻,但面临显著的可用性挑战,包括智能体能力与用户心智模型不匹配,以及智能体缺乏必要的元认知能力以进行有效协作。
引用
@article{arxiv.2509.14528,
title = {Why Johnny Can't Use Agents: Industry Aspirations vs. User Realities with AI Agents},
author = {Pradyumna Shome and Sashreek Krishnan and Sauvik Das},
journal= {arXiv preprint arXiv:2509.14528},
year = {2026}
}
备注
Accepted for publication in the 2026 ACM Conference on AI and Agentic Systems (CAIS)