不确定的研究国家排名:我们是否应继续产生不确定的排名?
数字图书馆
2025-08-14 v3 信息检索
物理与社会
摘要
目的:基于引用的国家研究能力评估常常误判其实现突破性进展的能力。这些评估通常将日本归类为发展中国家,这与其突出的科学地位相矛盾。本研究旨在探究此类不准确评估的根本原因,并提出进行更可靠评估的方法。设计/方法论/方法:本研究评估了顶级百分位引用指标作为突破性研究指示器的有效性。通过选定国家和研究主题的案例研究,考察了对数正态引用分布的偏差如何影响这些百分位指标的准确性。利用莱顿排名的大学数据进行了类似分析,以研究机构层面的引用分布偏差。发现:研究发现,引用分布中膨胀的较低尾部导致某些百分位指标低估了先进技术国家的研究能力。相反,研究密集型大学呈现出相反趋势:相对于上尾部,下尾部减小,导致百分位指标高估其实际研究能力。研究局限:描述的是不言自明的数学事实。实际意义:由于不同国家和机构的引用模式存在差异,Ptop 10%/P和Ptop 1%/P比率并非突破性研究的通用预测指标。评估应远离这些指标。依赖不恰当的基于引用的度量可能导致研究政策决策失误,削弱研究策略及其成果的有效性。
引用
@article{arxiv.2312.17560,
title = {Uncertain research country rankings. Should we continue producing uncertain rankings?},
author = {Alonso Rodriguez-Navarro},
journal= {arXiv preprint arXiv:2312.17560},
year = {2025}
}
备注
29 pages, 6 figures, 4 tables