我的检索字符串质量如何？对使用现有综述作为准黄金标准的反思
软件工程
2024-02-20 v1
摘要
背景：系统文献研究 (SLS) 已成为基于证据的软件工程 (EBSE) 的核心研究方法。检索完整性，即找到关于感兴趣主题的所有相关论文，已被认为是 SLS 中最常讨论的效度问题之一。目的：本研究旨在提高人们对检索字符串构建相关问题以及使用准黄金标准 (QGS) 进行检索验证的关注。此外，我们旨在为检索字符串验证提供指南。方法：我们以最近完成的一项三级研究作为案例，并结合其他研究 EBSE 的学者的观察来补充我们的发现。结果：我们发现评估 QGS 质量的问题在文献中未受到太多关注，且 SLS 中自动检索的验证有待改进。因此，我们建议通过对自动检索验证结果进行额外的分析步骤来扩展现有的检索验证方法，并为 QGS 的构建提供建议。结论：在本文中，我们报告了可能影响 SLS 中检索完整性的新问题。此外，所提出的指南和建议可帮助研究人员在其 SLS 中实施更可靠的检索策略。
引用
@article{arxiv.2402.11041,
title = {How good are my search strings? Reflections on using an existing review as a quasi-gold standard},
author = {Huynh Khanh Vi Tran and Jürgen Börstler and Nauman Bin Ali and Michael Unterkalmsteiner},
journal= {arXiv preprint arXiv:2402.11041},
year = {2024}
}