大语言模型展现出解释新颖文学隐喻的涌现能力
计算与语言
2024-01-18 v3
摘要
大语言模型 (LLM) 性能的最新进展引发了关于在充分训练下此类通用人工智能 (AI) 形式是否会涌现高级人类能力的争论。尽管LLM在涉及自然语言处理和推理的广泛任务上表现卓越，关于其能力是否延伸至更具创造性的人类能力仍存在尖锐分歧。一个核心例子是解释新颖隐喻的能力。鉴于用于训练LLM的海量且未筛选的文本语料库，设计测试的严峻障碍在于需要找到不太可能已包含在训练数据中的新颖且高质量的隐喻。在此，我们评估了最先进的大语言模型GPT4对取自塞尔维亚诗歌并译为英语的新颖文学隐喻提供自然语言解释的能力。尽管没有表现出先前接触过这些隐喻的迹象，该AI系统一贯产生详尽而敏锐的解释。盲法不知涉及AI模型的人类评判者将GPT4生成的隐喻解释评为优于一组大学生所提供的解释。在解释反转隐喻时，GPT4以及人类都表现出对Gricean合作原则的敏感性迹象。此外，对于数首新颖英文诗，GPT4产生的解释被人类文学评论家评为优秀或良好。这些结果表明，诸如GPT4的LLM已获得解释复杂隐喻（包括嵌入新颖诗歌中的隐喻）的涌现能力。
引用
@article{arxiv.2308.01497,
title = {Large Language Model Displays Emergent Ability to Interpret Novel Literary Metaphors},
author = {Nicholas Ichien and Dušan Stamenković and Keith J. Holyoak},
journal= {arXiv preprint arXiv:2308.01497},
year = {2024}
}