具有自动作文评分和自适应反馈的雅思写作修订平台

本文介绍了一个为国际英语语言测试系统（IELTS）写作考试考生设计的辅助修订平台的设计、开发与评估。传统的雅思备考方法缺乏针对雅思写作评分标准的个性化反馈。为了解决这些不足，该平台具有吸引人的用户界面（UI）、自动作文评分系统（AES）以及为考生和雅思写作评分标准量身定制的针对性反馈。该平台架构将会话式指导与专用写作界面分离，以减少认知负荷并模拟考试条件。通过迭代的、基于设计的研究（DBR）周期，该研究从基于规则的方法发展到带有回归头的基于 Transformer 的评分，并配备了自适应反馈。早期周期（2-3）揭示了基于规则方法的基本局限性：中分段压缩、低准确度和负的 $R^2$ 值。DBR 第 4 周期实现了一个带有回归头的 DistilBERT Transformer 模型，取得了显著改进，平均绝对误差（MAE）为 0.66，$R^2$ 为正值。这使得第 5 周期的自适应反馈实现成为可能，该实现展示了统计上显著的分数提高（平均 +0.060 分，p = 0.011，Cohen's d = 0.504），尽管效果因修订策略而异。研究结果表明，自动反馈功能最适合作为人工指导的补充，对于雅思备考环境，保守的表面级修正比激进的结构干预更可靠。在评估高分作文方面仍然存在挑战，未来的工作应纳入对真实雅思考生的纵向研究以及来自官方考官的验证。