专利描述的链式法律思维评估：Pat-DEVAL
计算与语言
2026-01-05 v1
摘要
专利描述必须在满足严格的法律标准（如使能要求和文字描述要求）的同时提供全面的技术披露。尽管大型语言模型已实现专利撰写的端到端自动化，但现有的评估方法无法评估描述的长期结构连贯性和法律合规性。我们提出Pat-DEVAL，这是首个专为专利描述正文构建的多维评估框架。利用LLM-as-a-judge范式，Pat-DEVAL引入链式法律思维（Chain-of-Legal-Thought, CoLT），这是一种受法律约束的推理机制，用于强制执行顺序的专利法规分析。实验通过专利专家在我们构建的Pap2Pat-EvalGold数据集上验证，表明Pat-DEVAL的Pearson相关系数达到0.69，显著优于基线指标和现有LLM评估器。值得注意的是，该框架在法律专业合规性方面的相关系数达到0.73，证明了对统计约束的显式注入对于捕捉细微的法律有效性至关重要。通过建立新的标准，确保技术可靠性和法律合规性，Pat-DEVAL为自动化专利撰写系统的实际部署提供了稳健的方法论基础。
引用
@article{arxiv.2601.00166,
title = {Pat-DEVAL: Chain-of-Legal-Thought Evaluation for Patent Description},
author = {Yongmin Yoo and Kris W Pan},
journal= {arXiv preprint arXiv:2601.00166},
year = {2026}
}