基于深度Q网络的移动机器人路径规划算法研究

来源 :重庆大学 | 被引量 : 0次 | 上传用户:wangxiaohong75
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着人工智能和自动避障技术的高速发展,机器人技术也成功的出现在医疗、服务、救援等领域之中,该技术是一门夹杂着多学科和技术的交叉学科。机器人技术领域的热点之一是路径规划问题,本文的研究对象是Turtle Bot3机器人,它的研究方向包括了路径规划效果、自主避障。由于深度强化学习不需要依赖环境模型,本文对深度强化学习中的深度Q网络(DQN)算法进行分析,针对原算法学习效率低下、搜索能力不高、无法进行长期记忆等问题做出了改善,并将其应用到移动机器人的路径规划中,并在复杂度不同的3D仿真环境中进行验证对比。其中主要工作和贡献如下:首先,建立两轮差速移动机器人运动学模型,编写了仿真模型需要的URDF文件,使用开源ROS系统中的Gazebo仿真软件完成了Turtle Bot3机器人模型的搭建以及不同复杂度下的环境构建。并在这些环境下对改进前后的算法进行仿真验证。其次,结合Turtle Bot3机器人的特点,对原算法的状态、动作空间以及奖励函数等方面进行了研究分析,对原算法进行了训练学习,找到了其中的不足之处。然后,针对当前DQN算法存在的问题,分别从算法本身、动作选择策略以及算法的网络结构对上述问题进行改进,通过对不同环境下仿真结果的分析,表明本文所提算法使得收敛速率、稳定性、学习效率等有所改善,验证了改进措施的有效性。最后,在不同的实验环境下,包括简单环境、静态动态环境以及混合障碍物环境,对各自改进的算法进行了实验,对其泛化性进行了测试,也验证了本文提出的算法在室内环境中用于路径规划的可行性。
其他文献
安装边作为航空发动机上的常见零件,需要有较佳的机械性能和稳定性,常采用镍基高温合金锻造加工而成。镍基高温合金变形温度范围窄,需要控制锻造温度来保证锻件质量,目前该锻件在锤上模锻,采用了两火次锻造成形,工序长。同时由于镍基合金变形抗力大,锤锻模极易发生变形和磨损失效,模具寿命极低。为减少火次、降低锤击次数、提高锤锻模服役寿命,本文通过有限元模拟分析软件DEFORM对该锻件锤锻成形工艺进行模拟仿真并优
学位
党的十八大以后,中国特色社会主义进入新时代,中国扶贫开发进入攻坚阶段。教育扶贫作为实现可持续减贫永续脱贫的根本之策,受到了党和政府的高度重视。以习近平同志为核心的党中央基于对新时代农村贫困问题的深入探索,创新阐述了新时代教育扶贫的科学意蕴与时代价值,推动教育扶贫提升到了前所未有的战略高度。一系列关于教育扶贫的新理论和新认识推动中国共产党教育扶贫向教育精准扶贫阶段迈进,重点聚焦突出短板,坚持精准发力
学位
学位
领导编制“五年规划”是中国共产党引领中国式现代化道路行稳致远的基本经验。从“一五”计划到“十四五”规划,编制和实施“五年规划”贯穿了新中国的全部历史。在中国共产党领导“五年规划”编制的历程中,“五年规划”编制实现了从经济指令计划到发展战略规划,从关注国民经济建设到全面涵盖党的建设和内政外交等方面的深刻转变,对我国现代化建设产生了全局性、根本性和长远性影响。而我国“五年规划”编制的规模、数量、内容、
学位
利用重庆市九龙坡区大气自动监测资料,对6种常规大气污染物(O3、CO、NO2、SO2、PM10和PM2.5)2020年的日均浓度以及“十二五”和“十三五”期间年均浓度进行分析。结果表明:2020年,O3、NO2、SO2、PM2.5、PM10和CO年均浓度首次全部达到国家二级标准;O3浓度呈现夏季高冬季低的特征,CO、NO2、SO2、PM10和PM2.5浓度则呈现夏季低冬季高的特征。“十二五”和“十
期刊
在智能化时代浪潮下,大数据和人工智能技术的应用快速发展,最高人民法院明确强调要提高涉诉信访系统的智能化水平。传统的涉诉信访系统在数据管理和共享上取得了显著成效,但在智能化处置技术上还明显不足,又尤其是在涉诉信访处理效果量化评估和相关舆情监控方面还存在缺失。国家重点研发计划“多源涉诉信访智能处置技术研究”的启动促进涉诉信访系统的智能化改革,对涉诉信访的处理效果评估和舆情监控提出了新的要求。本文在调研
学位
由于安装操作、制造工艺以及运行环境等影响,交联聚乙烯电力电缆容易发生绝缘故障。局部放电作为电缆绝缘失效的早期征兆,研究电缆局放的检测与模式识别,对排除电缆隐患,提升其运行可靠性有重大意义。超声检测法具有操作简单,不影响被测设备,受外部电磁噪声影响小等特点。目前,超声法应用于电缆局部放电诊断亟待进一步研究,包括明确超声检测指标和定量检测方法,准确建立PRPD等局部放电分析模式,提升局部放电类型识别率
学位
通过编制2019~2020年重庆市九龙坡区温室气体排放清单,对九龙坡区内的能源活动、工业生产过程、农业活动、土地利用变化、林业和废弃物处理5个领域产生的温室气体排放量进行了统计和核算,结果表明:能源活动领域是最主要的温室气体排放源,其次分别为工业生产过程、农业活动和废弃物处理。二氧化碳为温室气体重要构成,其次分别为甲烷、氧化亚氮和含氟气体。对全区温室气体排放的趋势进行了分析,提出严格控制传统高耗能
期刊
近年来,为应对能源环境危机、实现低碳可持续发展,构建以电力系统为中心的、多能互补多网融合的综合能源系统(integrated energy system,IES)逐渐成为国内外能源领域的新趋势。电-气综合能源系统(integrated electricity and natural gas system,IEGS)由电力系统和天然气网通过燃气机组、电转气装置(power to gas,P2G)和电
学位
白酒,是中国本土的蒸馏酒,深受中国的喜爱。近年来,中高端白酒的销售收入在逐年升高,人们逐渐追求高品质白酒。因此,对白酒品质的把控显得尤其重要。分段白酒是成品白酒的勾调原酒,其品质等级对白酒的整体风味和质量等级起着决定性作用。传统的摘酒工艺是由经验丰富的摘酒工人通过“一闻,二看,三品尝”来判断分段白酒的品质和等级。此类方法对摘酒师的专业素养要求高,且易受到主观因素的影响,无法规范化和数据化。另外,高
学位