中文

分层集成模型:从异构机器人中学习导航

机器人学 2021-11-08 v2 人工智能 机器学习

摘要

深度强化学习算法需要大量且多样的数据集,才能学会基于感知的移动导航策略。然而,使用单一机器人收集此类数据集的成本可能高得令人望而却步。利用具有可能不同动力学特性的多种不同机器人平台收集数据,是一种更具可扩展性的大规模数据收集方法。但是,深度强化学习算法如何利用此类异构数据集?在这项工作中,我们提出了一种具有分层集成模型(HInt)的深度强化学习算法。在训练时,HInt学习独立的感知模型与动力学模型;在测试时,HInt以分层方式集成这两个模型,并利用集成模型规划动作。这种使用分层集成模型进行规划的方法,使算法能够在由多种不同平台收集的数据集上训练,同时在测试时尊重部署机器人的物理能力。我们的移动导航实验表明,HInt优于传统的分层策略与单源方法。

关键词

引用

@article{arxiv.2106.13280,
  title  = {Hierarchically Integrated Models: Learning to Navigate from Heterogeneous Robots},
  author = {Katie Kang and Gregory Kahn and Sergey Levine},
  journal= {arXiv preprint arXiv:2106.13280},
  year   = {2021}
}