勿在沼泽上筑城堡！证据驱动软件工程中自动检索可复现性的危机
软件工程
2021-03-03 v1
摘要
证据驱动方法日益被用于综合软件工程领域原始研究的经验发现。然而，证据驱动软件工程（EBSE）研究的可复现性似乎未被充分重视。在我们对311篇样本研究的自动检索调查中，超过50%的检索式不可复用；约87.5%的检索活动（如检索字段设置）不可重复；超过95%的整个自动检索实现不可复现。考虑到检索是EBSE研究的基石，我们担忧当前二次研究的可复现性可能比想象中更糟。通过分析与报告上述现象的根本原因，我们敦促社区内所有利益相关方开展协作与合作，以改善EBSE中的研究可复现性。
引用
@article{arxiv.2103.01381,
title = {Stop Building Castles on a Swamp! The Crisis of Reproducing Automatic Search in Evidence-based Software Engineering},
author = {Zheng Li},
journal= {arXiv preprint arXiv:2103.01381},
year = {2021}
}