在多智能体配置中提升商用 AI 产品的性能
软件工程
2024-10-30 v1 人工智能
摘要
近年来，随着大语言模型（LLMs）的快速发展，多智能体系统在实际应用中的能力日益增强。与此同时，软件开发行业涌现出许多新的 AI 驱动工具，这些工具改进了软件开发生命周期（SDLC）。在学术界，多智能体系统在 SDLC 中的作用已受到广泛关注。然而，尽管单智能体系统在实际应用中经常被研究，我们却看到相对较少的公开商用工具在多智能体系统中协同工作并取得可衡量改进的真实世界案例。在本实验中，我们测试了 Crowdbotics PRD AI（一种使用 AI 生成软件需求的工具）与 GitHub Copilot（一种 AI 结对编程工具）之间的上下文共享。通过共享来自 PRD AI 的业务需求，我们将 GitHub Copilot 的代码建议能力提升了 13.8%，并将开发者的任务成功率提高了 24.5%——展示了一个商用 AI 系统协同工作并取得改进成果的真实世界案例。
引用
@article{arxiv.2410.22129,
title = {Improving Performance of Commercially Available AI Products in a Multi-Agent Configuration},
author = {Cory Hymel and Sida Peng and Kevin Xu and Charath Ranganathan},
journal= {arXiv preprint arXiv:2410.22129},
year = {2024}
}
备注
7 pages, 8 figures