TongSIM:用于模拟智能机器的通用平台
人工智能
2025-12-24 v1
摘要
随着人工智能(AI)的快速发展,尤其是在多模态大语言模型(MLLM)方面,研究重点正从单模态文本处理转向更复杂的多模态和具身AI领域。具身智能 focuses on 在真实模拟环境中训练智能体,利用物理交互和行动反馈,而不是传统的标记数据集。然而,大多数现有模拟平台仍仅针对特定任务进行狭窄设计,每个都针对特定任务进行优化。一个灵活、通用的训练环境以支持从低级具身导航到高级复合活动(如多智能体社交模拟和人机协作),仍然大部分不可用。为填补这一差距,我们引入TongSIM,一个高保真、通用平台用于训练和评估具身智能体。TongSIM 通过提供超过100个多房间室内情景以及一个开放性、富有互动性的户外城镇模拟,确保跨研究需求的广泛适用性。其综合评估框架和基准使能够精确评估智能体能力,如感知、认知、决策、人机协作、空间和社会推理。凭借定制场景、任务自适应保真度、多样化智能体类型和动态环境模拟,TongSIM 为研究人员提供灵活性和可扩展性,作为一个统一平台加速训练、评估和向通用具身智能发展。
引用
@article{arxiv.2512.20206,
title = {TongSIM: A General Platform for Simulating Intelligent Machines},
author = {Zhe Sun and Kunlun Wu and Chuanjian Fu and Zeming Song and Langyong Shi and Zihe Xue and Bohan Jing and Ying Yang and Xiaomeng Gao and Aijia Li and Tianyu Guo and Huiying Li and Xueyuan Yang and Rongkai Liu and Xinyi He and Yuxi Wang and Yue Li and Mingyuan Liu and Yujie Lu and Hongzhao Xie and Shiyun Zhao and Bo Dai and Wei Wang and Tao Yuan and Song-Chun Zhu and Yujia Peng and Zhenliang Zhang},
journal= {arXiv preprint arXiv:2512.20206},
year = {2025}
}