中文

Co-DETECT:文本分类中边缘案例的协作发现

计算与语言 2025-07-08 v1

摘要

我们引入了Co-DETECT(文本分类中边缘案例的协作发现),一种新颖的混合主动标注框架,它将人类专业知识与由大语言模型(LLMs)引导的自动标注相结合。Co-DETECT从领域专家提供的初始草图级代码本和数据集开始,然后利用LLM标注数据并识别初始代码本未能很好描述的边缘案例。具体来说,Co-DETECT标记出具有挑战性的示例,归纳出边缘案例的高层、可泛化描述,并协助用户整合边缘案例处理规则以改进代码本。这个迭代过程通过紧凑、可泛化的标注规则,使得能够更有效地处理细微现象。广泛的用户研究、定性和定量分析证明了Co-DETECT的有效性。

关键词

引用

@article{arxiv.2507.05010,
  title  = {Co-DETECT: Collaborative Discovery of Edge Cases in Text Classification},
  author = {Chenfei Xiong and Jingwei Ni and Yu Fan and Vilém Zouhar and Donya Rooein and Lorena Calvo-Bartolomé and Alexander Hoyle and Zhijing Jin and Mrinmaya Sachan and Markus Leippold and Dirk Hovy and Mennatallah El-Assady and Elliott Ash},
  journal= {arXiv preprint arXiv:2507.05010},
  year   = {2025}
}