用于考察统计方法的模拟研究之可复现性：RepliSims 项目
统计方法学
2023-07-06 v1
摘要
评估统计方法性能的模拟研究结果常被视为可据以行动的依据，因而对实证研究的实施方式可能产生重大影响。然而，迄今为止关于统计模拟研究的可重复性与可复现性的证据十分有限。为此，我们选取了八项被高频引用的统计模拟研究，并由具备量化方法正规受训背景的复现团队对其可复现性进行评估。各团队从原始出版物中查找相关信息，并据此编写模拟代码以试图复现结果。主要结局指标是基于原始出版物所报告信息实现可复现性的可行性。可复现性差异极大：部分原始研究提供了详尽信息，几乎完美复现了结果；而另一些研究则未提供足够信息以实施任何所报告的模拟。复现者不得不就原始研究中缺失或含糊的信息、错误处理以及软件环境做出抉择。促进复现的因素包括代码的公开可用，以及以图形、公式、结构化文本和公开可获取的技术报告等附加资源对数据生成过程与方法进行描述。统计模拟研究的可复现性主要受阻于信息缺失与信息来源不可持续。通过提供开放代码与数据作为出版物的补充材料，模拟研究的可重复性可得以实现。此外，模拟研究应透明报告，将所有相关信息置于论文本身或易于获取的补充材料中，以保证可复现性。
引用
@article{arxiv.2307.02052,
title = {Replicability of Simulation Studies for the Investigation of Statistical Methods: The RepliSims Project},
author = {K. Luijken and A. Lohmann and U. Alter and J. Claramunt Gonzalez and F. J. Clouth and J. L. Fossum and L. Hesen and A. H. J. Huizing and J. Ketelaar and A. K. Montoya and L. Nab and R. C. C. Nijman and B. B. L. Penning de Vries and T. D. Tibbe and Y. A. Wang and R. H. H. Groenwold},
journal= {arXiv preprint arXiv:2307.02052},
year = {2023}
}
备注
36 pages, 0 figures