提示隐式篇章关系标注
计算与语言
2024-02-08 v1 人工智能
摘要
预训练大语言模型，如 ChatGPT，在无需监督训练的各种推理任务中表现出色，并被发现优于众包工作者。尽管如此，ChatGPT 在由标准多项选择题提示的隐式篇章关系分类任务中的表现仍远不能令人满意，且明显逊于最先进的监督方法。这项工作研究了几种经过验证的提示技术，以提高 ChatGPT 对篇章关系的识别能力。特别是，我们尝试将涉及大量抽象标签的分类任务分解为更小的子任务。然而，实验结果表明，即使采用复杂的提示工程，推理准确率也几乎没有变化，这表明隐式篇章关系分类在零样本或少样本设置下尚无法解决。
引用
@article{arxiv.2402.04918,
title = {Prompting Implicit Discourse Relation Annotation},
author = {Frances Yung and Mansoor Ahmad and Merel Scholman and Vera Demberg},
journal= {arXiv preprint arXiv:2402.04918},
year = {2024}
}
备注
To appear at the Linguistic Annotation Workshop 2024