评估网络安全练习中两种学生进度评估方法

网络安全专业的学生需要培养使用命令行工具等实践技能。动手练习是评估这些技能最直接的方式，但对学生掌握程度的评估对教员而言是一项挑战性任务。我们旨在通过在整个练习过程中自动建模和可视化学生进度来缓解此问题。该进度由基于学生为完成练习中离散任务所键入的 shell 命令的图模型来概括。我们实现了两类模型，并使用来自两所大学 46 名学生的数据对它们进行比较。为评估我们的模型，我们调查了 22 位经验丰富的计算学科教员并定性分析了他们的反馈。大多数教员有效解读了图模型，并指出了每种模型的优势、劣势和评估用例。基于该评估，我们向教员提供建议，并解释我们的图模型如何创新教学并推动进一步研究。本文的影响有三方面。首先，它展示了多所机构如何协作共享在动手练习中建模学生进度的方法。其次，我们的建模技术可推广到来自不同环境的数据以支持学生评估，甚至超出网络安全领域。第三，我们共享所获取的数据和开源软件，以便他人可在自己的课程或研究中使用这些模型。