草叶碎片:GPT是否已经懂得像惠特曼那样写作?
计算与语言
2023-05-19 v1
摘要
本研究考察了 GPT-3.5、GPT-3.5-turbo(ChatGPT)与 GPT-4 模型使用零样本与多样本提示(采用 8192 token 的最大上下文长度)生成特定作者风格诗歌的能力。我们通过自动化评估,评估了这些未经微调以生成特定作者风格诗歌的模型的性能。我们的发现表明,在未微调的情况下,即便在提示中提供最多 17 首诗歌示例(8192 token),这些模型也无法生成所需风格的诗歌。
引用
@article{arxiv.2305.11064,
title = {Bits of Grass: Does GPT already know how to write like Whitman?},
author = {Piotr Sawicki and Marek Grzes and Fabricio Goes and Dan Brown and Max Peeperkorn and Aisha Khatun},
journal= {arXiv preprint arXiv:2305.11064},
year = {2023}
}
备注
short paper 5 pages