技能检验:关于角色扮演游戏中游戏主持模型评估的一些思考
计算与语言
2023-10-03 v2 人工智能
摘要
在角色扮演游戏中,游戏主持人(GM)是负责掌控游戏的玩家,必须设计玩家所面临的挑战并叙述其行动的结果。本文从交互式叙事与自然语言处理的角度讨论了建模 GM 的一些挑战。基于这些挑战,我们提出了三类测试来评估此类对话系统,并使用它们将 ChatGPT、Bard 和 OpenAssistant 作为开箱即用的 GM 进行了测试。
引用
@article{arxiv.2309.13702,
title = {Skill Check: Some Considerations on the Evaluation of Gamemastering Models for Role-playing Games},
author = {Santiago Góngora and Luis Chiruzzo and Gonzalo Méndez and Pablo Gervás},
journal= {arXiv preprint arXiv:2309.13702},
year = {2023}
}
备注
11 pages. Accepted at GALA 2023 (Games and Learning Alliance 12th International Conference)