用于共指消解中潜在性别偏见检测的二阶 WinoBias 测试集
计算与语言
2021-09-30 v1
摘要
尽管测试用例中不存在显式的性别词汇,我们仍在下游应用中观察到了由性别引起的偏见实例。我们提供了一个测试集 SoWinoBias,用于测量共指消解系统中的此类潜在性别偏见。我们评估了当前去偏见方法在 SoWinoBias 测试集上的性能,特别是结合方法的设计及其改变的嵌入空间属性进行了评估。参见 https://github.com/hillarydawkins/SoWinoBias。
引用
@article{arxiv.2109.14047,
title = {Second Order WinoBias (SoWinoBias) Test Set for Latent Gender Bias Detection in Coreference Resolution},
author = {Hillary Dawkins},
journal= {arXiv preprint arXiv:2109.14047},
year = {2021}
}
备注
7+2 pages. Published in the proceedings of the 3rd Workshop on Gender Bias in Natural Language Processing (co-located with ACL-IJCNLP 2021)