大语言模型在加密货币证券案件中的应用:GPT模型能否切实辅助律师?
人工智能
2024-02-23 v4 计算与语言
摘要
大语言模型(LLMs)可能是律师的有用工具。然而,关于其在执行法律任务方面有效性的实证研究很少。我们研究涉及加密货币的证券案件,作为AI可支持法律流程的众多场景之一,考察GPT-3.5的法律推理能力与ChatGPT的法律起草能力。我们检验:a) GPT-3.5能否从事实模式中准确判定哪些法律可能被违反;b) 基于律师与ChatGPT所写诉状,陪审员的决策是否存在差异。我们将真实案件的事实模式输入GPT-3.5,评估其从该情景中确定正确潜在违规行为并排除虚假违规的能力。其次,我们让模拟陪审员评估ChatGPT与律师撰写的诉状。GPT-3.5的法律推理能力较弱,尽管我们预期未来模型会改进,特别是考虑到其建议的违规往往是正确的(只是遗漏了额外的正确违规)。ChatGPT在法律起草方面表现更好,且陪审员的决策与其所依据文件的作者无统计显著关联。由于GPT-3.5无法令人满意地完成法律推理任务,现阶段其不太可能以有意义的方式帮助律师。然而,ChatGPT的起草技能(尽管或许仍逊于律师)可协助律师提供法律服务。我们的研究首次系统考察了LLM在诉讼中的法律起草与推理能力,以及其在证券法与加密货币相关不当行为中的表现。
引用
@article{arxiv.2308.06032,
title = {Large Language Models in Cryptocurrency Securities Cases: Can a GPT Model Meaningfully Assist Lawyers?},
author = {Arianna Trozze and Toby Davies and Bennett Kleinberg},
journal= {arXiv preprint arXiv:2308.06032},
year = {2024}
}