关于政治学中使用断点回归设计所发表发现的可靠性
统计方法学
2023-03-14 v2
摘要
断点回归(RD)设计在弱假设下提供因果效应的识别,使其在现代政治学研究中的标准方法地位得以确立。但识别并不一定意味着因果效应能够在有限数据下被准确估计。本文强调RD设计下的估计涉及严重的统计挑战,并考察这些挑战如何在政治学的实证文献中显现。我们收集了2009–2018年间顶级政治学期刊上发表的所有基于RD的发现。已发表结果的分布呈现出病态特征;估计值往往聚集在常规统计显著性水平略上方。对所有可获得数据的研究的重新分析表明,研究者的自由裁量权并非这些特征的主要驱动因素。然而,研究者往往使用不恰当的推断方法,导致标准误被人为缩小。回顾性功效分析揭示,这些研究大多功效不足,仅能检测到大效应。我们所揭示的问题,加之学术出版中已有充分记载的选择压力,令人担忧许多使用RD设计发表的发现可能被夸大。
引用
@article{arxiv.2109.14526,
title = {On the reliability of published findings using the regression discontinuity design in political science},
author = {Drew Stommes and P. M. Aronow and Fredrik Sävje},
journal= {arXiv preprint arXiv:2109.14526},
year = {2023}
}