是什么让数学应用题对LLM具有挑战性？
计算与语言
2024-04-02 v2
摘要
本文研究了是什么让英语数学应用题（MWPs）对大型语言模型（LLMs）具有挑战性。我们对MWPs的关键语言学和数学特征进行了深入分析。此外，我们训练了基于特征的分类器，以更好地理解每个特征对主流LLMs在MWPs整体难度上的影响，并研究这是否有助于预测LLMs在特定类别的MWPs上的表现。
引用
@article{arxiv.2403.11369,
title = {What Makes Math Word Problems Challenging for LLMs?},
author = {KV Aditya Srivatsa and Ekaterina Kochmar},
journal= {arXiv preprint arXiv:2403.11369},
year = {2024}
}
备注
Accepted to NAACL Findings 2024