GPT-4 是否能够学习分析研究文章摘要中的走向？
计算与语言
2024-11-05 v3 人工智能
摘要
written discourse analysis 中最强大且持久的思想之一是：genre 可以根据其结构 writer 目的的走向来描述。大量研究致力于识别这些 distinct communicative acts，但分析受主观性、可靠性以及需要多个编码者确认分析耗时等问题困扰。本文我们利用 GPT-4 的便利功能，通过自然语言提示自动化标注过程。我们聚焦于来自四个应用语言学期刊的摘要，构思能够使模型有效识别走向的提示。这些提示的标注输出由两位评估者评估，第三位处理分歧。结果表明，8-shot 提示比仅使用两个的提示更有效，确认包括示例以说明可变性区域的做法可以增强 GPT-4 识别单个句子中多个走向的能力，减少与文本位置相关的偏见。我们认为 GPT-4 在由具有特定语言学专业知识的人类参与者指导提示过程的情况下，为自动化这一标注过程提供了巨大的潜力。
引用
@article{arxiv.2407.15612,
title = {Can GPT-4 learn to analyse moves in research article abstracts?},
author = {Danni Yu and Marina Bondi and Ken Hyland},
journal= {arXiv preprint arXiv:2407.15612},
year = {2024}
}