人类与 AI 组合何时有用:系统综述与 Meta 分析
人机交互
2024-10-30 v2 人工智能
计算机与社会
摘要
受动力学 AI 增强人类的推广应用启发,研究人员已研究涉及不同任务、系统和人群的 human-AI 系统。尽管已有大量研究,但我们仍缺乏对人类与 AI 组合优于单独存在时机的广泛概念性理解。本研究通过对超过 100 项近期实验研究进行 meta 分析 (报告 300 多个效应大小) 来回答此问题。首先,我们发现人类-AI 组合在平均情况下显著低于最佳人类或 AI 单独存在。其次,在涉及做出决策的任务中表现下降,而在涉及创造内容的任务中则获得显著提升。最后,当人类优于 AI 单独存在时,我们发现组合中出现提升,但当 AI 优于人类单独存在时则出现损失。这些发现突显了人类-AI 协作效应的异质性,并指向改进 human-AI 系统的有前景的方向。
引用
@article{arxiv.2405.06087,
title = {When combinations of humans and AI are useful: A systematic review and meta-analysis},
author = {Michelle Vaccaro and Abdullah Almaatouq and Thomas Malone},
journal= {arXiv preprint arXiv:2405.06087},
year = {2024}
}