自由主义与功利主义治理体系下沟通与教学演化的多智能体强化学习研究
多智能体系统
2024-03-06 v1
摘要
实验室实验表明,沟通在解决社会困境中发挥着重要作用。在此,通过扩展 AI-Economist(一个混合动机的多智能体强化学习环境),我旨在回答以下描述性问题:哪种治理体系更能促进智能体之间沟通与教学的出现和演化?为回答此问题,AI-Economist 被扩展了投票机制,以模拟从完全自由主义到完全功利主义治理体系这三种不同的治理系统,涵盖个人主义至集体主义轴谱。此外,AI-Economist 进一步扩展以包含可能存在错位的沟通,这是一种信号博弈的变体,即如果智能体能够用同一个字母命名互补的材料资源,则允许它们共同建造房屋。另一次扩展是引入可能存在错位的教学,这同样是信号博弈的变体,即让一半智能体作为教师,他们知道如何使用互补材料资源建造房屋但无法实际建造,另一半作为学生,他们缺乏这些信息但若经教师指导则能实际建造房屋。我发现有力证据表明,如完全功利主义体系这样的集体主义环境更有利于沟通与教学的出现,更确切地说是语言对齐的演化。此外,我发现了一些证据表明,在集体主义治理体系下通过沟通和教学实现的语言对齐演化,使个体更倾向于优势不平等厌恶。因此,语言对齐的演化与社会平等之间存在正相关关系。
引用
@article{arxiv.2403.02369,
title = {A Multi-agent Reinforcement Learning Study of Evolution of Communication and Teaching under Libertarian and Utilitarian Governing Systems},
author = {Aslan S. Dizaji},
journal= {arXiv preprint arXiv:2403.02369},
year = {2024}
}
备注
20 pages, 14 figures