中文

学习绘画:通过草图涌现通信

计算机视觉与模式识别 2021-11-10 v2 人工智能 机器学习 多智能体系统

摘要

视觉通信先于书面语言并为其提供基础的 evidence 可追溯到史前,其形式如描绘我们遥远祖先踪迹的洞穴与岩石绘画。涌现通信研究致力于探索智能体如何学会通信以协作解决任务。已有研究聚焦于语言,采用学习的通信信道在智能体间传输离散 token 序列。在本工作中,我们探索智能体间允许用简单笔画作画的视觉通信信道。我们的智能体由深度神经网络参数化,且绘制过程可微分,从而支持端到端训练。在一个指称通信博弈框架下,我们证明智能体不仅能成功学会通过绘画通信,而且在具备适当的归纳偏置时,能以人类可解释的方式进行。我们希望鼓励未来研究将视觉通信视为训练协作智能体更灵活且可直接解释的替代方案。

关键词

引用

@article{arxiv.2106.02067,
  title  = {Learning to Draw: Emergent Communication through Sketching},
  author = {Daniela Mihai and Jonathon Hare},
  journal= {arXiv preprint arXiv:2106.02067},
  year   = {2021}
}