基于专家对物理学论文里程碑认定的几种颠覆性测量指标的收敛效度
数字图书馆
2020-06-19 v1 物理与社会
摘要
本研究聚焦于一种新近引入的测量科学颠覆性的指标。颠覆性研究通过开辟新的研究路线而偏离当前的研究路线。在本研究中，我们纳入了这种新类型的最初提出的指标（Wu, Wang, & Evans, 2019）以及几个变体：DI1、DI5、DI1n、DI5n 和 DEP。由于指标应该衡量其所提议衡量的内容，我们考察了这些指标的收敛效度。我们使用了由《物理评论快报》编辑挑选并发表的里程碑论文列表，并研究了这一人类（专家）认定的列表是否与几种颠覆性指标变体的值相关，如果相关，哪种变体与专家判断的相关性最高。我们使用双变量统计、多元回归模型和（粗化）精确匹配（CEM）来研究这些指标的收敛效度。结果表明，这些指标与编辑的里程碑论文认定的相关性各不相同。表现最好的并非最初提出的颠覆性指数（DI1），而是由 Bornmann, Devarakonda, Tekles 和 Chacko (2019) 引入的变体 DI5。在本研究的 CEM 分析中，由 Bu, Waltman 和 Huang (2019) 引入的 DEP 变体也显示出良好的结果。
引用
@article{arxiv.2006.10606,
title = {Convergent validity of several indicators measuring disruptiveness with milestone assignments to physics papers by experts},
author = {Lutz Bornmann and Alexander Tekles},
journal= {arXiv preprint arXiv:2006.10606},
year = {2020}
}