模拟研究中的陷阱与潜力：比较性模拟研究中的可疑研究行为可致任意方法虚假声称占优
统计方法学
2023-03-10 v4 统计计算
摘要
比较性模拟研究是统计方法基准测试的主力工具。与其他经验研究一样，模拟研究的成败取决于其设计、执行与报告的质量。若未谨慎且透明地进行，其结论可能具误导性。本文讨论各类可能影响模拟研究有效性的可疑研究行为，其中部分行为无法被统计学期刊当前的出版流程所发现或防范。为阐明观点，我们发明了一种预期无性能提升的新预测方法，并在预注册的比较性模拟研究中对其基准测试。我们展示了若采用可疑研究行为，使该方法看似优于成熟竞争方法是何等容易。最后，我们为研究者、审稿人及其他学术利益相关者提供具体建议，以提升比较性模拟研究的方法学质量，例如预注册模拟方案、激励中性模拟研究以及代码与数据共享。
引用
@article{arxiv.2203.13076,
title = {Pitfalls and potentials in simulation studies: Questionable research practices in comparative simulation studies allow for spurious claims of superiority of any method},
author = {Samuel Pawel and Lucas Kook and Kelly Reeve},
journal= {arXiv preprint arXiv:2203.13076},
year = {2023}
}