审阅机器人反馈对 OSS GitHub 仓库中智能 PR 的影响
软件工程
2026-04-28 v1
摘要
自主编码代理正在通过在 GitHub 上创建拉取请求 (PR) 重塑软件开发，称为 agentic PR。与此同时，审查过程也在变得自主，使得审阅机器人成为这些 agentic PR 评估的关键角色。然而，这些审阅机器人的影响在 PR 被接受和解决方面仍不清晰。本研究通过分析审阅机器人反馈质量 (相关性、清晰度、简洁性) 和审阅机器人活动量 (评论数量) 与 PR 被接受和解决时间之间的关系，来探讨审阅机器人反馈与 PR 结果之间的关系。我们分析了来自 AI_Dev 数据集中 7,416 条审阅机器人评论在 4,532 个 PR。我们的结果显示，审阅机器人评论主要集中在 bug 修复、测试和文档方面，语气礼貌，且具有指令性。审阅机器人大致 produces clear and concise feedback，尽管与底层代码变更相关的评论语义相关性适中。我们发现，更高的审阅机器人活动量与更长的 PR 解决时间和较低的平均反馈质量相关，显示出随着机器人在 PR 上生成更多评论，反馈的平均相关性会下降。与此同时，审阅机器人反馈质量与工作流程结果没有显著关联。我们的发现表明，在 agentic PR 工作流程中，审阅机器人应该优先提供有针对性的高相关反馈，而不是生成大量评论。
引用
@article{arxiv.2604.24450,
title = {On the Footprints of Reviewer Bots Feedback on Agentic Pull Requests in OSS GitHub Repositories},
author = {Syeda Kaneez Fatima and Yousuf Abrar and Abdul Rehman Tahir and Amelia Nawaz and Shamsa Abid and Abdul Ali Bangash},
journal= {arXiv preprint arXiv:2604.24450},
year = {2026}
}
备注
5 pages, 3 figures, 1 table, Mining Software Repositories (MSR'26) Conference