基于赋权的内在动机改变环境
人工智能
2014-06-09 v1 适应与自组织系统
摘要
智能的一个方面是重构自身环境的能力，从而使所生存的世界对自身更有益。本文研究了信息论中的智能体赋权（empowerment）度量如何提供一种与任务无关的内在动机来重构世界。我们展示了具身（embodiment）和环境的变化如何改变智能体的行为及其在世界上留下的产物。为此，我们引入了一种基于稀疏采样的既定赋权形式体系的近似方法，该方法对于确定性动力学而言更简单且计算速度显著更快。稀疏采样还在决策过程中引入了一定程度的随机性，事实证明这对某些情况是有益的。随后，我们利用该度量在受 Minecraft 启发的三维方块世界中生成了不同具身智能体的行为。这些典型结果表明，赋权不仅可以像过去所示那样在给定静态环境中生成动作，还可以作为一种合适的通用内在动机来修改现有的环境条件。在此过程中，出现的修改智能体环境的策略被证明对特定的智能体能力（即实际上对其具身）具有意义。
引用
@article{arxiv.1406.1767,
title = {Changing the Environment Based on Empowerment as Intrinsic Motivation},
author = {Christoph Salge and Cornelius Glackin and Daniel Polani},
journal= {arXiv preprint arXiv:1406.1767},
year = {2014}
}
备注
31 pages, 8 figures, published in Entropy (http://www.mdpi.com/1099-4300/16/5/2789), much extended version of http://arxiv.org/abs/1310.3692