更好地调用 Claude：大语言模型能否检测写作风格变化？
计算与语言
2025-09-05 v1
摘要
本文探讨了最先进的大语言模型 (LLM) 在一个最具挑战性的任务——句子级风格变化检测方面的零样本性能。在对PAN~2024和2025年'多作者写作风格分析'数据集进行基准测试后，我们提出了几个观察结果。首先，最先进的生成模型对写作风格的变化敏感——即使是在单个句子的细粒度层面。其次，它们的准确率为该任务建立了具备挑战性的基线，超越了PAN竞赛所建议的基线。最后，我们探讨了语义对模型预测的影响，并呈现了证据表明，最新一代大语言模型可能比此前报告的更敏感于内容无关且纯粹是风格信号。
引用
@article{arxiv.2508.00680,
title = {Better Call Claude: Can LLMs Detect Changes of Writing Style?},
author = {Johannes Römisch and Svetlana Gorovaia and Mariia Halchynska and Gleb Schmidt and Ivan P. Yamshchikov},
journal= {arXiv preprint arXiv:2508.00680},
year = {2025}
}