大语言模型适用于引导阅读吗?
计算与语言
2023-05-22 v2
摘要
本文考察大语言模型参与教育性引导阅读的能力。我们具体评估其从输入文本生成有意义问题、在内容覆盖和问题难度上生成多样化问题、以及基于学生对问题的回答推荐学生应重读文本部分的能力。基于对ChatGPT和Bard的评估,我们报告:1)大语言模型能够生成与输入文本高度相关的高质量有意义问题;2)它们生成覆盖输入文本大多数主题的多样化问题,尽管随着输入文本增长该能力显著下降;3)大语言模型能够生成低认知和高认知问题,尽管显著偏向于低认知问题;4)它们能够有效总结回答并提取应重读的文本内容。
引用
@article{arxiv.2305.10645,
title = {Are Large Language Models Fit For Guided Reading?},
author = {Peter Ochieng},
journal= {arXiv preprint arXiv:2305.10645},
year = {2023}
}