面向 Krippendorff's Alpha 一致性系数推断的改进
统计方法学
2022-10-25 v1
摘要
在本文中，我推荐了一种更好的 Krippendorff's Alpha 一致性系数的点估计量，并开发了一种刀切法（jackknife）方差估计量，其区间估计表现远优于常规的 bootstrap 程序或另一种 bootstrap 程序。在提出新方法后，我分析了先前由 Krippendorff 分析过的名义数据，以及两个实验观测数据集：（1）来自先天性膈疝影像研究的定序数据，以及（2）美国环境保护局宾夕法尼亚州费城地区的空气污染数据。后两个应用是新颖的。所提方法现已在我开源 R 包 krippendorffsalpha 的 2.0 版中得到支持，该包支持常用及用户自定义距离函数，并可处理任意数量的单元、任意数量的编码者以及缺失值。区间计算可并行化。
引用
@article{arxiv.2210.13265,
title = {Toward improved inference for Krippendorff's Alpha agreement coefficient},
author = {John Hughes},
journal= {arXiv preprint arXiv:2210.13265},
year = {2022}
}