MIMo：用于研究认知发展的多模态婴儿模型
人工智能
2023-12-08 v1 机器学习
摘要
人类智能和人类意识在认知发展过程中逐渐出现。理解这种发展是理解人类心智的一个重要方面，并可能有助于构建具有类似属性的人工心智。重要的是，人类认知发展依赖于与物理和社会环境的具身交互，这些交互通过互补的感觉模态被感知。这些交互允许发展中的心智探索世界的因果结构。这与常见的机器学习方法（例如大语言模型）形成鲜明对比，后者只是被动地“消化”大量训练数据，而不控制其感官输入。然而，对导致人类智能和意识的这种自定具身交互的计算建模是一个巨大的挑战。在这里，我们提出MIMo，一个开源的多模态婴儿模型，用于通过计算机模拟研究早期认知发展。MIMo的身体模仿18个月大的儿童，具有详细的五指手。MIMo通过双目视觉、前庭系统、本体感觉和通过全身虚拟皮肤的触觉感知来感知周围环境，而两种不同的驱动模型允许控制其身体。我们描述了MIMo的设计和接口，并提供了说明其使用的示例。所有代码可在https://github.com/trieschlab/MIMo获取。
引用
@article{arxiv.2312.04318,
title = {MIMo: A Multi-Modal Infant Model for Studying Cognitive Development},
author = {Dominik Mattern and Pierre Schumacher and Francisco M. López and Marcel C. Raabe and Markus R. Ernst and Arthur Aubret and Jochen Triesch},
journal= {arXiv preprint arXiv:2312.04318},
year = {2023}
}
备注
11 pages, 8 figures. Submitted to IEEE Transactions on Congnitive and Developmental Systems (TCDS)