更精确的统计显著性差异测试方法
计算与语言
2007-05-23 v1
摘要
对诸如召回率、精确率和平衡 F 分数等指标值之间差异的统计显著性测试是经验自然语言处理的必要环节。不幸的是，我们在一组实验中发现，许多常用测试方法往往低估显著性，从而不太可能检测到不同技术之间存在的差异。这种低估来源于常被违反的独立性假设。我们指出了一些不做此假设的有用测试，包括计算密集型的随机化测试。
引用
@article{arxiv.cs/0008005,
title = {More accurate tests for the statistical significance of result differences},
author = {Alexander Yeh},
journal= {arXiv preprint arXiv:cs/0008005},
year = {2007}
}
备注
7 pages, uses colacl.sty