中文

文本与音频简化:人类 vs. ChatGPT

计算与语言 2024-05-06 v1 人工智能

摘要

文本和音频简化以提高信息理解在医疗保健领域至关重要。鉴于 ChatGPT 的出现,对其简化性能进行评估变得必要。我们提供了对人类和 ChatGPT 简化文本的系统比较,使用十四项指标反映文本难度。我们简要介绍了我们的在线编辑器,其中包括这些简化工具,包括 ChatGPT。我们对十二个语料库进行评分:六个文本、一个音频和五个 ChatGPT 简化语料库。我们将这些语料库与先前用户研究中简化并验证的文本进行比较。最后,医疗领域专家评估了这些文本和五个新的 ChatGPT 简化版本。我们发现简单语料库与人类简化文本的相似性更高。ChatGPT 简化将指标向正确方向移动。医疗领域专家评估显示,ChatGPT 风格受到偏好,但文本本身在内容保留方面评分较低。

关键词

引用

@article{arxiv.2405.01592,
  title  = {Text and Audio Simplification: Human vs. ChatGPT},
  author = {Gondy Leroy and David Kauchak and Philip Harber and Ankit Pal and Akash Shukla},
  journal= {arXiv preprint arXiv:2405.01592},
  year   = {2024}
}

备注

AMIA Summit, Boston, 2024