了解你的受众：LLM 能否适应不同的年龄与教育水平？
计算与语言
2023-12-05 v1 人工智能
摘要
大型语言模型（LLM）提供了诸多新可能，包括将文本适配于不同受众及其阅读需求。但它们的适配能力究竟如何？我们评估了四个最先进的 LLM（商业与开源）在提示针对不同年龄群体和教育水平回答科学问题时，所生成答案的可读性。为评估 LLM 对不同受众的适应能力，我们将生成回答的可读性得分与各年龄和教育群体的推荐理解水平进行了比较。我们发现不同 LLM 答案的可读性存在巨大差异。结果表明，LLM 的回答需要更好地适配目标受众的人口统计特征，以提高其可理解性。这凸显了在教育场景中提升 LLM 适应性以迎合不同年龄和教育水平的重要性。总体而言，当前的 LLM 具有固定的可读性范围，即使给予提示也不能很好地适应不同受众。这限制了它们在教育领域的潜力。
引用
@article{arxiv.2312.02065,
title = {Know Your Audience: Do LLMs Adapt to Different Age and Education Levels?},
author = {Donya Rooein and Amanda Cercas Curry and Dirk Hovy},
journal= {arXiv preprint arXiv:2312.02065},
year = {2023}
}