情感感知、情感不可知或自动：获取认知事件评价标注的语料库创建策略

评价理论解释了事件的认知评估如何导致特定情绪。与基本情绪或情感（效价/唤醒度）理论相比，该理论在自然语言处理中未受到太多关注。然而，在心理学中它已被证明十分有力：Smith和Ellsworth（1985）表明，注意、确定性、预期努力、愉悦度、责任/控制以及情境控制这些评价维度可区分至少15种情绪类别。我们基于以事件为中心的enISEAR语料库（Troiano等人，2019）研究了针对这些维度的不同标注策略。我们分析了两种人工标注设置：（1）展示待标注文本但遮蔽所经历的情绪标签；（2）揭示与文本相关的情绪。设置2使标注者能对所述事件形成更真实的直觉，而设置1是更标准的标注流程，纯粹依赖文本。我们通过两种方式评估这些策略：测量标注者间一致性，以及微调RoBERTa以预测评价变量。我们的结果表明，知晓情绪可提高标注者的可靠性。此外，我们评估了一种纯自动的基于规则的标注策略（从已标注的情绪类别推断评价）。在自动分配的标签上训练使我们的分类器获得有竞争力的性能，即使在手动标注上测试时也是如此。这表明，对于已存在情绪语料库的任一领域，有可能自动创建评价语料库。