中文

ChatGPT 作为组合泛化的数据增强:以开放意图检测为例

计算与语言 2023-08-28 v1 人工智能

摘要

开放意图检测是自然语言理解的关键方面,涉及对用户生成文本中先前未见意图的识别。尽管该领域已取得进展,在处理语言组件新组合(对组合泛化至关重要)方面仍存在挑战。本文以一个案例研究探索使用 ChatGPT 作为数据增强技术以提升开放意图检测任务中的组合泛化。我们首先讨论现有基准在评估此问题上的局限,强调构建用于解决开放意图检测中组合泛化数据集的必要性。通过将 ChatGPT 生成的合成数据纳入训练过程,我们证明该方法能有效提升模型性能。对多个基准的严格评估显示,我们的方法优于现有技术并显著增强开放意图检测能力。我们的发现凸显了如 ChatGPT 之类大语言模型(LLM)在自然语言理解任务中数据增强的潜力。

关键词

引用

@article{arxiv.2308.13517,
  title  = {ChatGPT as Data Augmentation for Compositional Generalization: A Case Study in Open Intent Detection},
  author = {Yihao Fang and Xianzhi Li and Stephen W. Thomas and Xiaodan Zhu},
  journal= {arXiv preprint arXiv:2308.13517},
  year   = {2023}
}