过往表现、同行评议与项目遴选：社会与行为科学的一项案例研究
物理与社会
2009-11-09 v1
摘要
过往表现会影响基金申请的成功率吗？在本研究中，我们检验了荷兰经济与社会科学研究委员会的基金分配决策是否与申请人在论文发表和引用方面的过往表现，以及该委员会组织的同行评议过程的结果相关。我们表明，该委员会能够成功区分表现高于平均水平和低于平均水平的基金申请人，但在前一组中，未发现过往表现与获得资助之间存在相关性。当比较被拒绝资助的表现最佳的研究人员与获得资助的研究人员群体时，被拒绝的研究人员的表现显著优于获得资助者。此外，被拒绝的最佳提案在同行评议过程的结果上的平均得分与已接受的提案一样高。最后，我们发现所研究的委员会在遴选过程中成功纠正了性别效应。我们解释了为什么这些发现可能比仅针对此案例更具普遍性。然而，如果研究委员会无法选出“最佳”研究人员，或许他们应该重新考虑其使命。在最后一节关于政策启示的部分，我们从变异、创新和质量控制的角度，讨论了研究委员会在科学系统层面的作用。
引用
@article{arxiv.0911.1306,
title = {Past performance, peer review, and project selection: A case study in the social and behavioral sciences},
author = {Peter van den Besselaar and Loet Leydesdorff},
journal= {arXiv preprint arXiv:0911.1306},
year = {2009}
}