若不使用灰色文献我们会遗漏哪些证据?
软件工程
2021-08-19 v4
摘要
背景:近年来,灰色文献(GL)在软件工程(SE)的二次研究中受到越来越多的关注。值得注意的是,在多声文献综述(MLR)研究中,即在传统文献(TL)和 GL 中同时检索证据的研究,尤其受益于 GL 内容的增长。尽管对基于 MLR 的研究兴趣日益增长,但评估 GL 如何贡献于 MLR 研究的文献仍然匮乏。目标:本研究旨在评估 GL 的使用如何贡献于 MLR 研究。所谓贡献,是指理解 GL 在多大程度上提供了确实被某 MLR 用来回答其研究问题的证据。方法:我们开展了一项三级研究,以识别 2017 至 2019 年间发表的 MLR 研究,筛选出九项 MLR 研究。通过定性与定量分析,我们识别了所用 GL 并评估这些 MLR 在多大程度上贡献于 MLR 研究。结果:我们的分析发现:1)GL 提供了 TL 中未发现的证据;2)大多数 GL 来源被用于提供解决问题的建议、解释某一主题以及分类发现;3)研究中使用了 19 种不同 GL 类型;这些 GL 主要由 SE 从业者产生(包括博客文章、幻灯片演示或项目描述)。结论:我们证实了 GL 如何贡献于 MLR 研究。我们观察到,若这些 GL 未被纳入 MLR,若干发现会被遗漏或削弱。我们还描述了开展此项调查所涉及的挑战及潜在应对方式,或可裨益未来 SE 研究者。
引用
@article{arxiv.2107.05792,
title = {What Evidence We Would Miss If We Do Not Use Grey Literature?},
author = {Fernando Kamei and Gustavo Pinto and Igor Wiese and Márcio Ribeiro and Sérgio Soares},
journal= {arXiv preprint arXiv:2107.05792},
year = {2021}
}