中文

基于强化学习的清洁机器人路径规划

机器人学 2022-08-18 v1 人工智能

摘要

近年来,随着清洁机器人需求稳步增长,家庭用电量也随之增加。为解决这一用电问题,清洁机器人高效路径规划问题变得重要并已开展诸多研究。然而,多数研究仅涉及沿简单路径段移动,而非覆盖所有区域的整体路径。随着深度学习的兴起,强化学习(RL)已被应用于清洁机器人。但现有RL模型仅能在特定清洁环境中运行,无法适应多样清洁环境。问题在于,每当清洁环境改变时模型都须重新训练。为解决该问题,将近端策略优化(PPO)算法与一种可在多样清洁环境中运行的高效路径规划相结合,采用迁移学习(TL)、检测最近已清洁栅格、奖励塑形及构建精英集等方法。所提方法通过消融实验及与随机、锯齿等常规方法的对比得到验证。实验结果表明,相较原始PPO,所提方法训练性能更优且收敛速度更快;同时也表明该方法性能优于常规方法(随机、锯齿)。

关键词

引用

@article{arxiv.2208.08211,
  title  = {Path Planning of Cleaning Robot with Reinforcement Learning},
  author = {Woohyeon Moon and Bumgeun Park and Sarvar Hussain Nengroo and Taeyoung Kim and Dongsoo Har},
  journal= {arXiv preprint arXiv:2208.08211},
  year   = {2022}
}

备注

7 pages with 11 figures