不同的引文分布使研究评估复杂化：无法制定一个普遍揭示研究效率的单一指标

目的：分析不同研究主题出版物引文分布的多样性，以研究规模无关的、基于排名的指标的准确性。基于百分位数的指标是此类指标中最常见的，而对日本的评估是最明显的误判。设计/方法/途径：使用对数分箱直方图、双秩图和对数转换引文数的正态概率图，分析了来自不同国家和期刊的出版物在若干研究主题中的引文分布，并与相应的全球出版物进行了比较。发现：当本地出版物的全球排名符合幂律分布时，基于百分位数的规模无关指标是准确的，但在低被引论文中，偏差在国家层面频繁出现，并在所有高影响因子期刊中发生。在这些情况下，单一指标会产生误导。比较未引用论文的比例是预测这些偏差的最佳方法。研究局限性：本研究本质上是分析性的；其结果描述的是不言自明的数学事实。实际意义：诸如经合组织、欧盟委员会、美国国家科学委员会等知名机构使用规模无关的百分位数指标进行国家研究排名和个人评估，这在许多国家具有误导性。这些误导性评估应停止，因为它们会导致研究政策制定者的困惑，并导致错误的研究政策。原创性/价值：此前尚未有研究将引文分布的低尾部分（包括未引用论文）与百分位数研究指标联系起来。目前的结果表明，此类研究对于寻找可靠的研究评估程序是必要的。