大语言模型是好的 cryptic crossword 解谜器吗？
人工智能
2025-01-14 v2 计算与语言
机器学习
摘要
Cryptic crosswords 是一种谜题，不仅依赖常识，还依赖解谜者在不同层面上操纵语言以及处理各种文字游戏的能力。先前的研究表明，解决此类谜题即使对现代NLP模型也是一项挑战。然而，大语言模型（LLMs）在此任务上的能力尚未得到测试。在本文中，我们为三种流行的LLM——LLaMA2、Mistral和ChatGPT——建立了基准结果，表明它们在此任务上的表现仍远不及人类。
引用
@article{arxiv.2403.12094,
title = {Are LLMs Good Cryptic Crossword Solvers?},
author = {Abdelrahman Sadallah and Daria Kotova and Ekaterina Kochmar},
journal= {arXiv preprint arXiv:2403.12094},
year = {2025}
}