将教学法聚焦：异步学习环境中虚拟助教问答的评估
计算与语言
2025-09-23 v1
摘要
异步学习环境（ALE）被广泛用于正式和非正式学习，但及时且个性化的支持往往有限。在这一背景下，虚拟助教（VTA）有可能减轻教师的工作量，但严谨且基于教学理论的评估至关重要。现有的评估往往依赖表面层面的指标，并且缺乏对教育理论的充分支撑，使得不同VTA系统的教学有效性难以进行有意义的比较。为了填补这一空白，我们提出了一个根植于学习科学并针对异步论坛讨论量身定制的评估框架，这是ALE中常见的VTA部署场景。我们利用专家对VTA在多样化论坛帖子上的回答的标注构建了分类器。我们评估了分类器的有效性，识别出提高准确率的方法以及阻碍泛化的挑战。我们的工作为VTA系统的理论驱动评估奠定了基础，为教育中更符合教学法的AI铺平了道路。
引用
@article{arxiv.2509.17961,
title = {Bringing Pedagogy into Focus: Evaluating Virtual Teaching Assistants' Question-Answering in Asynchronous Learning Environments},
author = {Li Siyan and Zhen Xu and Vethavikashini Chithrra Raghuram and Xuanming Zhang and Renzhe Yu and Zhou Yu},
journal= {arXiv preprint arXiv:2509.17961},
year = {2025}
}
备注
Accepted in EMNLP 2025 Findings