同行评审结果的可靠性与可比性

本文基于两所比利时大学研究团队的同行评分，调查了同行评审的可靠性。研究发现，专家赋予评分的不同方式会显著影响结果。为提高同行评分的可靠性，应设想建立统一参考标准的程序。至少应检查低可靠性的迹象，这可通过分析同行评估本身的结果获得。我们将同行评审结果与相同团队在引文索引覆盖良好的学科领域内出版物的引文分析结果进行了比较。文章阐明了除了可靠性之外，结果的可比性如何取决于指标的性质、学科领域以及方法的内在特征。结果进一步证实了当前被视为良好实践的做法：呈现一系列指标的结果，而非单一指标的结果。