经验元算法研究的最佳实践:COSEAL研究网络的指南
人工智能
2025-12-22 v2
摘要
元算法领域的经验研究,如算法选择、配置和调度,通常依赖广泛且因此计算成本高昂的实验。我们在实验设置和设计方面拥有的大量自由度带来了众多可能的错误来源,威胁着我们科学洞察的可扩展性和有效性。元算法研究的最佳实践已存在,但它们分散在不同的出版物和领域中,并且彼此独立持续发展。在本报告中,我们收集了COSEAL社区各子领域元算法研究的好实践,涵盖了整个实验周期:从提出研究问题和选择实验设计,到执行实验,以及最终公正地分析和呈现结果。它确立了元算法研究当前的最先进实践,并作为新研究人员和元算法领域从业者的指南。
引用
@article{arxiv.2512.16491,
title = {Best Practices For Empirical Meta-Algorithmic Research: Guidelines from the COSEAL Research Network},
author = {Theresa Eimer and Lennart Schäpermeier and André Biedenkapp and Alexander Tornede and Lars Kotthoff and Pieter Leyman and Matthias Feurer and Katharina Eggensperger and Kaitlin Maile and Tanja Tornede and Anna Kozak and Ke Xue and Marcel Wever and Mitra Baratchi and Damir Pulatov and Heike Trautmann and Haniye Kashgarani and Marius Lindauer},
journal= {arXiv preprint arXiv:2512.16491},
year = {2025}
}