基于强化学习的四足机器人路径规划研究

来源 :上海海洋大学 | 被引量 : 0次 | 上传用户:ZGGILOVE
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年来,随着无人智能装备技术的发展,在生活中出现了不同类型的机器人,它们的功能和形态都有所不同,如在危险环境的搜索机器人,在流水线作业的工业机器人等。在发生特殊灾难的情况下,救援环境总是十分恶劣,并不适合救援人员进行作业,就会耽误宝贵的救援时间;但是四足机器人可以凭借着其良好的仿生学性能接替救援人员展开救援任务,可以减少人员的损伤和提高搜救效率。在这种应用背景下,四足机器人得到了大量的关注,对自主导航功能的研究逐渐深入,主要分为两个模块:自主定位与建模(Simultaneous Localization and Mapping,SLAM)和路径规划(Path Planning),这两个模块如何应用在四足机器人上是本文的研究重点。本文使用激光雷达作为四足机器人的环境感知传感器,对SLAM技术和路径规划技术分别进行了理论研究和仿真实验,最后在机器人操作系统(Robot Operation System,ROS)上实现SLAM建模和路径规划算法规划。本文主要的工作和结果如下:(1)首先使用SLAM技术对外界环境进行重现,四足机器人的定位基于粒子滤波算法,接着对基于扩展卡尔曼滤波的建图算法进行原理和实验分析。由上述研究引出基于PF-EKF的Fast-SLAM算法,对Fast-SLAM和EKF-SLAM进行粒子退化实验分析,结果表明Fast-SLAM解决了粒子退化现象,使得机器人定位精度更高,误差更小,可以适用于复杂环境下的四足机器人建模。(2)其次在路径全局规划算法模块开展研究。全局规划算法研究对象为粒子群和Q-Learning算法,传统Q-Learning算法本身拥有学习的能力,但在学习初期存在一定的盲目性,需要足够的学习经验;粒子群算法运行时会随机分布粒子,将得到的个体极值和群体极值作为经验“送给”Q-Learning算法进行学习,基于以上两种算法提出全新的全局规划算法—PSO-QL,在MATLAB中对粒子群算法、Q-Learning算法、PSO-QL算法做对比实验分析,通过仿真实验分析出PSO-QL算法相比于其他两种算法在路径规划时间和路径长度上都有所降低,最后设置不同的折扣因子γ和学习速率α进行仿真实验,来验证PSO-QL算法的适应性。(3)随后在局部路径规划模块,针对原始DWA算法运行效率低的问题,提出一种改进评价函数的DWA算法,对改进后的DWA算法与原DWA算法进行对比实验,实验结果表明改进后的DWA算法在路径规划的长度上降低了19%。针对L型障碍物的避障问题,在改进后的DWA算法的基础上融合了全局规划信息,实验结果说明改进后的DWA算法可以解决避障问题。(4)最后考虑到四足机器人在复杂环境下需要应对突发情况,提出一种混合算法,该算法耦合了PSO-QL算法和改进DWA算法,拥有全局规划和局部规划的能力。用PSO-QL算法进行全局规划,DWA算法在对其规划好的路径进行优化,仿真结果证明了混合算法良好的寻优和避障能力。分析了四足机器人的硬件和软件整体框架,以pupper四足机器人作为测试平台,对四足机器人的SLAM、路径规划功能进行实验。将本文使用的Fast-SLAM算法移植到四足机器人平台,对Gmapping算法进行实验,在四足机器人上应用混合算法,测试结果证明了算法的优越性。
其他文献
ESP教学是近年来二语教学的热门研究方向。该文以ESP真实性原则为依托,探讨在ESP视角下基于专用语料库的商务英语词汇教学。该研究从词汇教学的3个方向出发,探讨如何通过专用语料库的索引行检索、词频检索和词词比较功能,进行商务英语术语,词汇搭配和近义词辨析教学,从而将专用语料库词汇教学与传统词汇教学方式形成优势互补。
随着企业集团财务共享中心的普及,国家税务部门主导的增值税在线申报系统日趋完善,税务共享开始推广并逐步成为财务共享中心的一个重要职能。通过共享中心进行集团下属公司的增值税申报流程的统一化及标准化,加强申报工作流程管理,控制税务风险已成为许多集团公司的选择。伟创力信息技术公司是伟创力集团下属中国区共享服务中心,涵盖了财务共享、人力资源共享、IT共享、物料采购共享等主要功能。本文聚焦于伟创力信息技术公司
<正>风扇是家家户户必备的电器,但关于风扇的知识,你了解多少呢?为什么风扇的叶片多是奇数、风扇的叶片是多好还是少好……本文为你揭秘。风扇叶片多好还是少好风扇利用电机转动带动扇叶转动,上部空气受力“流走”,产生负压(即低于常压),下部空气“流入”,形成连续的空气流动。最初的3叶风扇可以形成一个合理的力学动力,2片处于势能状态的叶片,轻松带动一片暂不具备势能的叶片,节省电力。在风面积相同的情况下,
期刊
目的 探究格林模式干预用于维持性血液透析(MHD)对患者遵医行为、健康认知及并发症的影响。方法 前瞻性选取2020年8月~2021年7月解放军联勤保障部队第九二二医院收治的MHD患者110例,随机数表法分为常规对照组55例和格林模式组55例。常规对照组通过口头或发放健康教育手册的形式进行常规宣教;格林模式组在社会学、流行病学、行为环境、教育组织和管理政策评估下针对MHD患者遵医行为、健康认知及并发
<正>习近平总书记在党的十九大报告首次提出乡村振兴战略。制定乡村振兴规划、实施乡村振兴战略成为各级党委和政府的重点工作任务,提出了"产业兴旺、生态宜居、乡风文明、治理有效、生活富裕"的总要求。产业兴旺被列在首位,足以说明在整个乡村振兴战略中,产业兴旺的定位是乡村振兴战略中最为基础、最为关键的任务。
期刊
目的 比较左乙拉西坦与丙戊酸治疗儿童癫痫的有效性与安全性,为临床用药提供循证参考。方法 计算机检索中国知网、维普网、中国生物医学文献数据库、万方数据、PubMed、Embase、Cochrane Library,收集左乙拉西坦(试验组)对比丙戊酸(对照组)的随机对照试验(RCT),检索时限均为各数据库建库起至2021年10月1日。筛选文献、提取资料后,采用Cochrane系统评价员手册5.1.0推
随着新课程改革的不断推进,小学科学课程更加注重综合性与实践性的融合,以提供学生充足的时间探究、实践与思考为目标,要求合理规划学生的学习活动。而项目式学习能够为学生提供实践性平台,全面提升学生的科学能力。所以教师要注重项目式学习活动的安排,立足于多样的项目,引导学生探索科学本质。本文从项目式学习的概念和必要性入手,阐述了小学科学课堂项目式学习的有关策略。
班主任是班级的领导者,又是德育工作的主要参与者和引导者,对学校的发展也起着重要的影响。在学生们的日常学习生活中,语文班主任与学校的联系较多。所以,学校语文班主任的教学行为往往会左右孩子的日常行为。这就需要学校的语文班主任在实施德育过程中,应注意所掌握的教育方法带来的好处,以有效提升学校德育教育的质量。