中文

METIS:面向深思探究与解决方案的指导引擎

机器学习 2026-01-21 v1 人工智能

摘要

许多学生缺乏获得专家研究指导的机会。我们探讨 AI 导师能否引导本科生从一个想法发展为一篇论文。我们构建了 METIS,一个工具增强且阶段感知的助手,具备文献检索、精选指南、方法学检查和记忆功能。我们使用 LLM-as-a-judge 成对偏好、学生角色评分标准、简短多轮辅导以及证据/合规检查,在六个写作阶段将 METIS 与 GPT-5 和 Claude Sonnet 4.5 进行了评估。在 90 个单轮提示中,LLM 评判者在 71% 的情况下比 Claude Sonnet 4.5 更偏好 METIS,在 54% 的情况下比 GPT-5 更偏好 METIS。学生得分(清晰度/可操作性/约束契合度;90 个提示 × 3 个评判者)在各个阶段均更高。在多轮会话中(每个智能体五个场景),METIS 产生的最终质量略高于 GPT-5。提升集中在基于文档的阶段 (D-F),这与阶段感知路由和基础支撑相一致;失败模式包括过早的工具路由、浅层基础支撑以及偶尔的阶段误分类。

关键词

引用

@article{arxiv.2601.13075,
  title  = {METIS: Mentoring Engine for Thoughtful Inquiry & Solutions},
  author = {Abhinav Rajeev Kumar and Dhruv Trehan and Paras Chopra},
  journal= {arXiv preprint arXiv:2601.13075},
  year   = {2026}
}

备注

12 pages, 5 figures, 4 tables