第三方实现对于可复现性的影响
信息检索
2023-07-28 v1
摘要
近年来，推荐系统研究的可复现性受到了审视。除了关注使用特定算法重复实验的工作外，研究界也开始讨论评估的各种方面及其如何影响可复现性。我们通过考察非官方第三方实现可能促进或阻碍可复现性，为这一讨论增添了新颖的视角。除给出总体概述外，我们深入考察了一种流行推荐算法的六种第三方实现，并在五个公开数据集上将其与官方版本进行比较。鉴于我们令人警觉的发现，我们旨在引起研究界对这一被忽视的可复现性方面的关注。
引用
@article{arxiv.2307.14956,
title = {The Effect of Third Party Implementations on Reproducibility},
author = {Balázs Hidasi and Ádám Tibor Czapp},
journal= {arXiv preprint arXiv:2307.14956},
year = {2023}
}
备注
Appearing in the Proceedings of the 17th ACM Conference on Recommender Systems (RecSys'23)