抽取-生成轴:度量生成式语言模型中的内容“借用”
计算与语言
2023-07-25 v1 人工智能
计算机与社会
机器学习
摘要
生成式语言模型按其设计会产生高度生成式的输出,这与搜索引擎中的抽取式响应形成对比。鉴于 LLM(大语言模型)的这一特性及其对内容许可与归属的影响,我们提出了所谓的抽取-生成轴用于生成式模型的基准测试,并强调开发相应指标、数据集与标注指南的必要性。我们将讨论限于文本模态。
引用
@article{arxiv.2307.11779,
title = {The Extractive-Abstractive Axis: Measuring Content "Borrowing" in Generative Language Models},
author = {Nedelina Teneva},
journal= {arXiv preprint arXiv:2307.11779},
year = {2023}
}