角色扮演提示框架：生成与评估
计算与语言
2024-12-16 v4
摘要
大型语言模型（LLM）在自然语言生成、理解用户指令和模仿类人语言使用方面展现出令人印象深刻的熟练度，这导致人们对其在角色扮演场景中的应用产生了浓厚兴趣。然而，手动收集特定角色的剧本数据和评估模型性能是资源密集型的过程。本文介绍了一个基于提示的框架，旨在利用GPT的能力来生成角色扮演对话数据集并评估角色扮演性能。为了验证基于GPT的生成和评估的有效性，我们进一步引入了面向召回的Rouge-L指标，提供了一个额外的定量性能度量。
引用
@article{arxiv.2406.00627,
title = {Role-playing Prompt Framework: Generation and Evaluation},
author = {Xun Liu and Zhengwei Ni},
journal= {arXiv preprint arXiv:2406.00627},
year = {2024}
}