双盲评审期间通过 arXiv 投稿对作者去匿名化
计算机与社会
2020-07-02 v1 信息检索
机器学习
摘要
在本文中，我们研究了发布正处于双盲评审过程中的论文的 arXiv 预印本所产生的影响。具体而言，我们提出以下研究问题：通过 arXiv 预印本对作者去匿名化与（名义上）双盲会议论文录用之间有什么关系？在两种条件下——即在评审阶段之前发布于 arXiv 的论文与未发布的论文——我们考察了作者声誉与评审分数及录用决定之间的相关性。通过分析 ICLR 2020 和 ICLR 2019 投稿数据集（n=5050），我们发现了在录用比例与发布于 arXiv 的高声誉论文之间存在正相关性的统计显著证据。为了更好地理解这一观察到的关联，我们基于评审者自行指定的置信度分数进行了额外分析，并观察到置信度较低的评审者更有可能给知名作者论文打高评审分、给不知名作者论文打低评审分，其中声誉以 Google Scholar 引用次数衡量。我们事先强调，我们的结果纯属相关性，我们既不能也不意图做出任何因果断言。随论文附带的博客文章以及我们的爬取代码将在项目网站 https://sites.google.com/view/deanon-arxiv/home 中提供链接。
引用
@article{arxiv.2007.00177,
title = {De-anonymization of authors through arXiv submissions during double-blind review},
author = {Homanga Bharadhwaj and Dylan Turpin and Animesh Garg and Ashton Anderson},
journal= {arXiv preprint arXiv:2007.00177},
year = {2020}
}