数字农科院2.0

基于强化学习的机器人底盘能量管理与路径规划优化算法

文献类型： 中文期刊

作者： 李潇宇;张君华;郭晓光;伍纲

作者机构：

关键词： 温室;路径规划;强化学习;能量管理;多目标优化

期刊名称：农业工程学报

ISSN： 1002-6819

年卷期： 2024 年

页码：

收录情况： EI（2024版） ; ; 北大核心（2023版） ; ; CSCD（2023-2024年度） ; ; 科技核心（2024版） ; ; 农林核心（2020版）

摘要： 为解决温室底盘传统路径规划中因忽略地面粗糙度而导致的电池寿命缩短与利用效率低下的问题，该研究探讨了3种融合电池能量管理与路径规划的强化学习算法。首先基于先验知识构建分级预打分奖励模型，并通过增加曼哈顿距离构建奖励函数，提高电池寿命和利用率；其次针对传统Q-Learning(QL)算法收敛效率低、易陷入局部最优等问题，提出了自适应变步长的优化算法（adaptive multi-step q-learning,AMQL）和基于自适应改变探索率的优化算法（adaptive ε-greedy q-learning,AEQL），以提升Q-Learning算法的性能。此外，为进一步提高算法的可行性，本文将AMQL算法和AEQL算法进行融合，提出了一种自适应多步长和变ε-greedy融合算法（adaptive multi-step and ε-greedy qlearning,AMEQL），并通过仿真对比的方式，验证了AMQL和AMEQL算法相对于传统QL算法在3个不同垄道下的性能。仿真试验结果表明：AMQL相对于传统QL算法，训练平均时间降低23.74%，收敛平均迭代次数降低14.01%，路径平均拐点数降低54.29%，收敛后的平均波动次数降低18.01%;AMEQL相对于传统QL算法，训练平均时间降低34.46%，收敛平均迭代次数降低23.68%，路径平均拐点数降低63.13%，收敛后的平均波动次数减少15.62%，在400次迭代过程中，AMEQL到达最大奖励后平均每7.12次迭代波动1次，而AMQL平均每6.68次迭代波动1次。可知AMEQL训练时间最短，收敛最快，路径拐点数量最低，奖励波动最小，而AMQL次之。该算法可为温室底盘自主路径规划提供理论参考。

分类号：

  • 相关文献

[1]基于环境经济调度问题的空间自适应划分多目标优化. 伍大清,刘立,郑建国,朱君璇,赵燕. 2015

[2]数控机床进给机构智能设计优化系统. 刘世豪,杜彦斌,姚克恒,唐敦兵. 2017

[3]玛曲县草畜平衡优化方案与管理决策初探. 张旭,冯琦胜,梁天刚. 2012

[4]工业大麻收割机切割-输送关键部件作业参数优化. 黄继承,沈成,纪爱敏,李显旺,张彬,田昆鹏,刘浩鲁. 2021

[5]基于多目标优化的飞防队作业调度模型研究. 曹光乔,张庆凯,陈聪,张萌,张进龙,黄玉祥. 2019

[6]4DL-5A型蚕豆联合收割机关键部件设计与优化. 杨光,陈巧敏,夏先飞,陈建能,宋志禹. 2021

[7]基于连通分量与遗传算法的多目标种植规划方法——以富锦市为例. 徐梦华,王秀娟,冷佩,张濛濛,王浩宇,华净,康孟珍. 2025

[8]农业机械无人驾驶系统关键技术研究进展. 张隆梅,刘岗微,齐彦栋,杨腾祥,金诚谦. 2022

[9]基于人工势场法的移动机器人路径规划研究现状与展望. 石志刚,梅松,邵毅帆,万如,宋志禹,谢铭露,李燕. 2021

[10]基于小麦收割机作业路线行走方向的调度优化研究. 南风,曹光乔,李亦白,陈聪,刘东. 2022

[11]基于改进人工势场法的农用机器人路径规划技术研究. 邵毅帆,梅松,石志刚,宋志禹,童一飞. 2023

[12]基于视觉—RTK的苹果园植保机器人自主导航研究. 黄鹏飞,薛新宇,崔龙飞. 2025

[13]基于往复运动和路径规划的蓝光激光除草机构研制. 颜浩,谭彧,马伟,封煜亮,田志伟. 2025

[14]果蔬采摘机器人研究现状及发展趋势. 夏先飞,贾磊,张硕,宫庆硕,吕俊潼,沈成,张进龙,梁明旭. 2026

[15]大跨度保温型温室的热环境模拟. 方慧,张义,伍纲,程瑞锋,周波,杨其长. 2019

[16]温室用小型多功能电动履带式作业平台设计. 崔志超,管春松,陈永生,高庆生,杨雅婷. 2019

[17]基于卷积神经网络的温室黄瓜病害识别系统. 马浚诚,杜克明,郑飞翔,张领先,孙忠富. 2018

[18]基于CFD的不同走向大跨度保温型温室温度场模拟. 方慧,杨其长,张义,程瑞锋,张芳,卢威,刘焕. 2017

[19]太阳能热利用技术在我国温室中的应用现状. 伍纲,杨其长,张义,方慧. 2018

[20]基于改进纯追踪模型的温室采摘运输自动跟随系统. 汪小旵,鲁伟,陈满,王挺,章永年,Boukangou M P. 2016

作者其他论文 更多>>