基于最终答案评估的步骤组合错误规则诊断
人工智能
2025-07-21 v1
摘要
许多智能辅导系统能够支持学生解决分步任务。当学生将多个步骤合并为一个步骤时，连接连续输入的可能路径数量可能非常庞大。这种组合爆炸使得错误诊断变得困难。利用最终答案来诊断步骤组合可以缓解组合爆炸问题，因为可能的（错误）最终答案通常比可能的（错误）解题路径要少。一个任务的中间输入可以通过根据任务解题策略自动完成该输入并对此解题过程进行诊断来加以诊断。本研究探讨了基于最终答案的自动错误诊断的潜力。我们设计了一种服务，当学生合并多个步骤时，该服务能够提供错误规则诊断。为验证该方法，我们将该服务应用于一个包含学生求解二次方程时独特步骤的现有数据集（n=1939），这些步骤无法通过尝试用单一规则连接连续输入的错误规则服务来诊断。结果表明，最终答案评估可以诊断其中29.4%的步骤。此外，将生成的诊断结果与教师对子集（n=115）的诊断结果进行比较，发现诊断结果在97%的情况下是一致的。这些结果可被视为进一步探索该方法的依据。
引用
@article{arxiv.2507.13651,
title = {Buggy rule diagnosis for combined steps through final answer evaluation in stepwise tasks},
author = {Gerben van der Hoek and Johan Jeuring and Rogier Bos},
journal= {arXiv preprint arXiv:2507.13651},
year = {2025}
}