中文

LLM 与法律援助:通过用户查询理解法律需求

人机交互 2025-01-06 v1 人工智能

摘要

本文对捷克专家小组 Frank Bold 开展的一项实验进行了初步分析,该实验旨在探索用户与 GPT-4 的交互以解决法律查询。在 2023 年 5 月 3 日至 2023 年 7 月 25 日期间,共有 1,252 名用户提交了 3,847 条查询。与主要关注大型语言模型准确性、事实性或幻觉倾向的研究不同,我们的分析侧重于交互中的用户查询维度。使用 GPT-4o 进行零样本分类,我们将查询分类为:(1) 用户是否提供了关于其问题的客观事实信息(29.95%)或未提供(70.05%);(2) 他们是否在寻求法律信息(64.93%)或寻求行动建议(35.07%);以及 (3) 他们是否提出了塑造或控制模型回答的要求(28.57%)或未提出(71.43%)。我们对用户需求提供了定量和定性的见解,有助于更好地理解用户与 LLMs 的交互参与。

关键词

引用

@article{arxiv.2501.01711,
  title  = {LLMs & Legal Aid: Understanding Legal Needs Exhibited Through User Queries},
  author = {Michal Kuk and Jakub Harasta},
  journal= {arXiv preprint arXiv:2501.01711},
  year   = {2025}
}

备注

Accepted at AI for Access to Justice Workshop at Jurix 2024, Brno, Czechia