中文

用增强大语言模型(GPT-4)解释法律概念

计算与语言 2023-06-23 v2 人工智能

摘要

解释法律开放性文本术语的含义是法律从业者的关键任务。此种解释的一个重要来源是术语在既往判例中的适用方式。本文中,我们评估了 GPT-4 在生成立法中术语的事实准确、清晰且相关的解释方面的表现。我们将基线设置(直接要求 GPT-4 解释法律术语)与增强方法(使用法律信息检索模块以判例法中的句子形式为模型提供相关上下文)的性能进行比较。我们发现,直接应用 GPT-4 产生的解释表面看来质量极高。然而,详细分析揭示了其在解释事实准确性方面的局限。进一步,我们发现增强带来了质量提升,且似乎消除了模型虚构错误陈述的幻觉问题。这些发现为构建能够自主检索判例法相关句子并将其浓缩为对法律学者、教育者或执业律师均有用的解释的系统打开了大门。

关键词

引用

@article{arxiv.2306.09525,
  title  = {Explaining Legal Concepts with Augmented Large Language Models (GPT-4)},
  author = {Jaromir Savelka and Kevin D. Ashley and Morgan A. Gray and Hannes Westermann and Huihui Xu},
  journal= {arXiv preprint arXiv:2306.09525},
  year   = {2023}
}