AI辅助模拟法庭：模拟司法相关提问的口头论证

在口头论证中，法官会对辩护律师提出关于事实记录、法律主张及论证力度的问题。为准备这类提问，法学院和在职律师都依赖模拟法庭：仿真的上诉听证练习。基于美国最高法院口头论证录音资料，我们检验AI模型是否能够有效模拟司法相关提问，以支持模拟法庭式训练。评估口头论证模拟具有挑战性，因为任何给定时刻都没有唯一正确的问题。相反，有效的提问应体现一组合理特征，如预判实质性法律问题、检测逻辑弱点、保持恰当的对抗语气。我们引入两层评估框架，使用互补的代理指标评估模拟问题的真实性与教育有用性。我们构建并评估了基于提示和基于智能体的口头论证模拟器。我们发现，模拟问题常被人类标注者视为真实，能很好地召回真实实质性法律问题。然而，模型仍面临显著局限，包括问题类型多样性低和迎合现象。值得注意的是，这些局限在不采用敏感评估方法时将难以察觉。