将多重宇宙分析引入文献计量学:团队规模对颠覆性研究的影响
数字图书馆
2026-03-27 v2 应用统计
摘要
尽管文献计量学已成为评估研究绩效的重要工具,但文献计量分析对多种方法选择敏感。数据选择、指标构建和建模决策中的细微选择可能显著改变结果。因此,确保稳健性(即发现在不同合理场景下成立)对于可信的研究和研究评估至关重要。为解决这一问题,本研究将多重宇宙分析引入文献计量学。多重宇宙分析是一种统计工具,使分析者能够透明地讨论建模假设并全面评估模型稳健性。而标准稳健性检验通常仅覆盖所有合理模型的一小部分,多重宇宙分析则涵盖所有合理模型。多重宇宙分析的优势通过评估 Wu et al. (2019) 报道的发现稳健性来说明,该研究发现小团队往往比大团队产生更具颠覆性的研究。虽然我们发现了团队规模对颠覆性得分具有负面影响的稳健证据,但效应量在很大程度上取决于模型设定。我们的发现强调了评估文献计量学结果的多重宇宙稳健性以明确其实际意义的重要性。
引用
@article{arxiv.2506.03726,
title = {Introducing multiverse analysis to bibliometrics: The case of team size effects on disruptive research},
author = {Christian Leibel and Lutz Bornmann},
journal= {arXiv preprint arXiv:2506.03726},
year = {2026}
}
备注
50 pages, 3 figures, 11 tables. Quantitative Science Studies 2026