EMP-EVAL：一种用于开放域对话中同理心测量的框架
人工智能
2023-01-31 v1
摘要
在对话中测量同理心可能具有挑战性，因为同理心是一种复杂的、多方面的心理构念，涉及认知与情感两个成分。人工评估可能带有主观性，导致结果不一致。因此，需要一种自动测量同理心的方法，以减少对人工评估的依赖。本文提出了一种新颖的方法 EMP-EVAL，一种简单而有效的自动同理心评估方法。所提出的技术考虑了情感同理心、认知同理心与情感成分的影响。据我们所知，我们的工作是首个在无人工标注给定分数情况下系统测量同理心的研究。实验结果表明，我们的指标能够与人工偏好相关联，取得与人工判断相当的结果。
引用
@article{arxiv.2301.12510,
title = {EMP-EVAL: A Framework for Measuring Empathy in Open Domain Dialogues},
author = {Bushra Amjad and Muhammad Zeeshan and Mirza Omer Beg},
journal= {arXiv preprint arXiv:2301.12510},
year = {2023}
}
备注
7 pages, 5 figures, 4 tables