发表偏倚：对 ESEM 所发表实验的详细分析
软件工程
2021-06-24 v1
摘要
背景：发表偏倚是指基于研究结果的方向或强度而未将研究结果发表的现象。发表偏倚的存在在医学研究等领域已得到确证。近期研究表明软件工程领域也存在发表偏倚。目的：查明国际经验软件工程与度量研讨会（ESEM）发表的 experiments 是否受发表偏倚影响。方法：我们回顾了 ESEM 发表的 experiments，并对实验研究人员开展调查以三角验证我们的发现。结果：ESEM 实验未定义假设且频繁进行多重检验。单尾检验取得统计显著结果的比率略高。我们未能发现其他与发表偏倚相关的做法。结论：与既往研究相比，我们的结果为软件工程研究提供了更令人鼓舞的视角：（1）ESEM 发表似乎未受偏倚的强烈影响；（2）我们识别出一些可能与 p-hacking 相关的做法，但更可能它们与探索性研究的开展有关。
引用
@article{arxiv.2106.12533,
title = {Publication Bias: A Detailed Analysis of Experiments Published in ESEM},
author = {Rolando P. Reyes and Óscar Dieste and Efraín R. Fonseca C. and Natalia Juristo},
journal= {arXiv preprint arXiv:2106.12533},
year = {2021}
}
备注
10 pages, 7 tables, 7 figures