ChatGPT 是好的性格识别器吗？一项初步研究
计算与语言
2023-12-29 v3
摘要
近年来，性格被视为一种有价值的个人因素，被纳入情感分析和产品推荐等众多任务中。这导致基于文本的个性识别任务受到广泛关注，该任务旨在根据给定文本识别个体的性格。考虑到 ChatGPT 近来在各种自然语言处理任务上展现出卓越能力，我们对其在基于文本的个性识别任务上生成有效性格数据的能力进行了初步评估。具体而言，我们采用多种提示策略探究 ChatGPT 从给定文本中识别性格的能力，特别是我们设计的面向层级的提示策略，用于引导 ChatGPT 在指定层级分析给定文本。在两个代表性真实世界数据集上的实验结果表明，采用零样本思维链提示的 ChatGPT 展现出令人印象深刻的性格识别能力，并能够通过基于文本的逻辑推理提供自然语言解释。此外，通过采用面向层级的提示策略优化零样本思维链提示，ChatGPT 与相应最先进模型之间的性能差距被进一步缩小。然而，我们观察到 ChatGPT 对某些敏感人口属性（如性别和年龄）表现出不公平性。另外，我们发现激发 ChatGPT 的性格识别能力有助于提升其在性格相关下游任务（如情感分类和压力预测）上的表现。
引用
@article{arxiv.2307.03952,
title = {Is ChatGPT a Good Personality Recognizer? A Preliminary Study},
author = {Yu Ji and Wen Wu and Hong Zheng and Yi Hu and Xi Chen and Liang He},
journal= {arXiv preprint arXiv:2307.03952},
year = {2023}
}
备注
15 pages, 13 figures, 5 tables