我们真的需要 Transformer 来玩 FPS 视频游戏吗？
机器学习
2025-04-28 v1
摘要
本文探讨了Transformer 架构在 Doom 游戏环境中的强化学习，涵盖在线和离线两种设置。我们的研究聚焦两种主要方法：深度Transformer Q学习网络(DTQN)用于在线学习，以及决策Transformer(DT)用于离线强化学习。DTQN利用Transformer 的序列建模能力来增强部分可观测环境中的Q学习，而决策Transformer则重新利用序列建模技术，使离线智能体能够在无需直接与环境交互的情况下从过去的轨迹中学习。我们得出结论，尽管Transformer在Atari游戏中可能表现良好，但在VizDoom环境中，更传统的方法在两种设置下均优于基于Transformer的方法。
引用
@article{arxiv.2504.17891,
title = {Do We Need Transformers to Play FPS Video Games?},
author = {Karmanbir Batth and Krish Sethi and Aly Shariff and Leo Shi and Hetul Patel},
journal= {arXiv preprint arXiv:2504.17891},
year = {2025}
}