中文

自然语言处理中的分布外检测综述

计算与语言 2023-12-29 v2 人工智能 机器学习

摘要

分布外(OOD)检测对于机器学习系统在现实世界中的可靠和安全部署至关重要。过去几年取得了巨大进展。本文首次对OOD检测的最新进展进行了综述,特别关注自然语言处理方法。首先,我们给出OOD检测的正式定义并讨论若干相关领域。然后,我们根据所用数据将近期算法分为三类:(1) 有OOD数据可用,(2) 无OOD数据+分布内(ID)标签可用,以及 (3) 无OOD数据+ID标签不可用。第三,我们介绍数据集、应用和评价指标。最后,我们总结现有工作并给出潜在的未来研究课题。

关键词

引用

@article{arxiv.2305.03236,
  title  = {A Survey on Out-of-Distribution Detection in NLP},
  author = {Hao Lang and Yinhe Zheng and Yixuan Li and Jian Sun and Fei Huang and Yongbin Li},
  journal= {arXiv preprint arXiv:2305.03236},
  year   = {2023}
}

备注

TMLR