中文

AutoMisty:面向 Misty 社交机器人的多智能体 LLM 自动代码生成框架

机器人学 2025-08-26 v2 人工智能 人机交互 多智能体系统

摘要

社交机器人的开放 API 允许用户自定义开放域交互。然而,对于没有编程经验的人来说,它仍然难以访问。在这项工作中,我们介绍了 AutoMisty,这是第一个由大型语言模型 (LLM) 驱动的多智能体协作框架,旨在从自然语言指令无缝生成可执行的 Misty 机器人代码。AutoMisty 包含四个专门的智能体模块,用于管理任务分解、分配、问题解决和结果综合。每个智能体都包含一个双层优化机制,具有用于迭代改进的自我反思和用于更好地与用户偏好对齐的人在回路。AutoMisty 确保了透明的推理过程,允许用户通过自然语言反馈迭代地改进任务以实现精确执行。为了评估 AutoMisty 的有效性,我们设计了一个跨越四个复杂度级别的基准任务集,并在真实的 Misty 机器人环境中进行了实验。广泛的评估表明,AutoMisty 不仅始终如一地生成高质量代码,而且实现了精确的代码控制,显著优于使用 ChatGPT-4o 和 ChatGPT-o1 的直接推理。所有代码、优化后的 API 和实验视频将通过以下网页公开发布:https://wangxiaoshawn.github.io/AutoMisty.html

关键词

引用

@article{arxiv.2503.06791,
  title  = {AutoMisty: A Multi-Agent LLM Framework for Automated Code Generation in the Misty Social Robot},
  author = {Xiao Wang and Lu Dong and Sahana Rangasrinivasan and Ifeoma Nwogu and Srirangaraj Setlur and Venugopal Govindaraju},
  journal= {arXiv preprint arXiv:2503.06791},
  year   = {2025}
}

备注

Accepted by IROS 2025