中文

CQSumDP:基于 Debatepedia 的 ChatGPT 标注的查询聚焦摘要生成资源

计算与语言 2023-05-11 v1

摘要

Debatepedia 是一个公开可用的数据集,包含关于争议性话题的论点与反论点,近年来被广泛用于单文档查询聚焦摘要生成任务。然而,最近发现该数据集受噪声限制,且其中大多数查询甚至与相应文档毫无关联。在本文中,我们提出一种利用大语言模型的生成能力来清洗 Debatepedia 数据集的方法,使其适用于查询聚焦摘要生成。更具体地,我们借助 ChatGPT 的语言生成能力重新生成其查询。我们使用多个基准摘要模型评估所提出的 ChatGPT 标注版 Debatepedia 数据集的有效性,并表明新标注版本的 Debatepedia 在查询相关性以及摘要生成质量两方面均优于原始数据集。我们将公开此标注并清洗后的数据集版本。

关键词

引用

@article{arxiv.2305.06147,
  title  = {CQSumDP: A ChatGPT-Annotated Resource for Query-Focused Abstractive Summarization Based on Debatepedia},
  author = {Md Tahmid Rahman Laskar and Mizanur Rahman and Israt Jahan and Enamul Hoque and Jimmy Huang},
  journal= {arXiv preprint arXiv:2305.06147},
  year   = {2023}
}

备注

10 Pages + References