中文

CheerBots:基于强化学习实现共情与情感的聊天机器人

计算与语言 2021-10-11 v1

摘要

除了回复的连贯性与流畅度,共情聊天机器人更关注人们的感受。通过考虑人际互动中的利他行为,共情聊天机器人使人们获得更好的互动与支持体验。本研究提出一个框架,若干共情聊天机器人基于理解用户隐含感受并在多轮对话中给出共情回复。我们称这些聊天机器人为CheerBots。CheerBots可为检索式或生成式,并通过深度强化学习微调。为以共情方式回复,我们开发了一个模拟智能体——概念人类模型(Conceptual Human Model),作为CheerBots训练中的辅助,考虑用户未来情绪状态的变化以唤起同情。最后,自动指标与人工评分结果表明,CheerBots优于其他基线聊天机器人并实现了互惠利他。代码与预训练模型将公开提供。

关键词

引用

@article{arxiv.2110.03949,
  title  = {CheerBots: Chatbots toward Empathy and Emotionusing Reinforcement Learning},
  author = {Jiun-Hao Jhan and Chao-Peng Liu and Shyh-Kang Jeng and Hung-Yi Lee},
  journal= {arXiv preprint arXiv:2110.03949},
  year   = {2021}
}