+高级检索
首页 > 过刊浏览>2024年第47卷第22期 >84-93
PDF HTML阅读 XML下载 导出引用 引用提醒
基于自适应探索DDQN的移动机器人路径规划
作者:
作者单位:

1.桂林理工大学广西高校先进制造与自动化技术重点实验室 桂林 541006; 2.桂林航天工业学院广西特种工程装备与 控制重点实验室 桂林 541004; 3.河池学院广西高校人工智能与信息处理重点实验室 河池 546300; 4.桂林明富机器人科技有限公司 桂林 541004; 5.南宁理工学院信息工程学院 桂林 541006

中图分类号:

TP242；TN711

基金项目:

国家自然科学基金(62063006)、广西科技重大专项(2022AA05002)、广西高校人工智能与信息处理重点实验室项目(2022GXZDSY003)资助


Path planning for mobile robots based on self-adaptive exploration DDQN
Author:
Affiliation:

1.Key Laboratory of Advanced Manufacturing and Automation Technology, Guilin University of Technology, Education Department of Guangxi Zhuang Autonomous Region，Guilin 541006, China; 2.Guangxi Key Laboratory of Special Engineering Equipment and Control, Guilin University of Aerospace Technology，Guilin 541004, China; 3.Key Laboratory of AI and Information Processing, Education Department of Guangxi Zhuang Autonomous Region， Hechi University, Hechi 546300, China; 4.Guilin Mingfu Robot Technology Company Limited，Guilin 541004, China; 5.School of Information Engineering, Nanning College of Technology，Guilin 541006, China

  • 摘要
    • | |
  • 访问统计
    • |
  • 参考文献
    • |
  • 相似文献
    • |
  • 引证文献
    • | |
  • 文章评论
    摘要:

    针对传统双深度Q网络算法在路径规划中探索和利用分配不平衡，数据利用不充分等问题，提出了一种改进的DDQN路径规划算法。首先，在自适应探索策略中引入探索成功率的概念，将训练过程分为探索环境和利用环境两个阶段，合理分配探索和利用。其次，通过双经验池混合采样机制，将经验数据按照奖励大小进行分区采样，确保有利数据的利用度达到最大。最后，设计了基于人工势场的奖励函数，使机器人能获得更多的单步奖励，有效改善了奖励稀疏的问题。实验结果表明，所提出的算法相比传统DDQN算法和基于经验分区和多步引导的DDQN算法能获得更高的奖励值，成功率更高，规划时间和步数也更短，算法整体性能更加优越。

    Abstract:

    To address issues such as the imbalanced allocation of exploration and exploitation, as well as insufficient data utilization in traditional double deep Q-Network algorithms for path planning, an improved DDQN path planning algorithm is proposed. Firstly, the concept of exploration success rate is introduced into the adaptive exploration strategy, dividing the training process into exploration and exploitation phases to allocate exploration and exploitation effectively. Secondly, the double experience pool mixed sampling mechanism partitions and samples experience data based on reward size to maximize the utilization of beneficial data. Finally, a reward function based on artificial potential field is designed to enable the robot to receive more single-step rewards, effectively addressing the issue of sparse rewards. Experimental results show that the proposed algorithm achieves higher reward values, greater success rates, and shorter planning times and steps compared to the traditional DDQN algorithm and the DDQN algorithm based on experience classification and multi-steps, demonstrating superior overall performance.

    参考文献
    相似文献
    引证文献
引用本文

冷忠涛,张烈平,彭建盛,王艺霖,张翠.基于自适应探索DDQN的移动机器人路径规划[J].电子测量技术,2024,47(22):84-93

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 在线发布日期: 2025-01-16
文章二维码
您是第 位访问者
主管单位：北京电子控股有限责任公司
主办单位：北京无线电技术研究所
地址：北京市东城区北河沿大街79号
电话：13810562337
电子测量技术 ® 2025 版权所有