自然语言处理中的分布外检测综述
计算与语言
2023-12-29 v2 人工智能
机器学习
摘要
分布外(OOD)检测对于机器学习系统在现实世界中的可靠和安全部署至关重要。过去几年取得了巨大进展。本文首次对OOD检测的最新进展进行了综述,特别关注自然语言处理方法。首先,我们给出OOD检测的正式定义并讨论若干相关领域。然后,我们根据所用数据将近期算法分为三类:(1) 有OOD数据可用,(2) 无OOD数据+分布内(ID)标签可用,以及 (3) 无OOD数据+ID标签不可用。第三,我们介绍数据集、应用和评价指标。最后,我们总结现有工作并给出潜在的未来研究课题。
引用
@article{arxiv.2305.03236,
title = {A Survey on Out-of-Distribution Detection in NLP},
author = {Hao Lang and Yinhe Zheng and Yixuan Li and Jian Sun and Fei Huang and Yongbin Li},
journal= {arXiv preprint arXiv:2305.03236},
year = {2023}
}
备注
TMLR