社区视角下软件工程同行评审的现状与未来

背景：科学文章的出版前同行评审被认为是软件工程研究过程的关键要素，但人们常常认为其运行效果不佳。目标：我们旨在了解软件工程领域最负盛名的会议之一——国际软件工程会议（ICSE）——的作者和审稿人对同行评审的看法和态度。方法：我们邀请了 932 位 ICSE 2014/15/16 的作者和审稿人参与一项包含 10 个封闭式问题和 9 个开放式问题的调查。结果：我们呈现了众多结果，例如：受访者认为所有评审中仅三分之一是好的，而三分之一无用或具有误导性；他们建议采用双盲或零盲评审机制以改进；他们希望引入可展示的（良好）评审工作证明；态度变化趋势微弱。结论：对软件工程同行评审现状的看法相当负面。此外，我们几乎没有发现任何表明评审会随时间自行改善的趋势；社区必须做出明确的努力。幸运的是，我们的受访者（大多为资深人士）对尝试不同同行评审机制的态度比我们预期的更为开放。