基于深度强化学习的多自动导引车运动规划

来源 :计算机集成制造系统 | 被引量 : 0次 | 上传用户:purpleplain
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为解决移动机器人仓储系统中的多AGV无冲突运动规划问题,建立了马尔可夫决策过程(MDP)模型,提出了一种新的基于深度Q网络(DQN)的求解方法。将AGV的位置作为输入信息,利用DQN估计该状态下采取每个动作所能够获得的最大期望累计奖励,并使用经典的深度Q学习算法进行训练。算例计算结果表明,该方法可以有效克服AGV车队在运动中的碰撞问题,从而使得AGV车队能够在无冲突的情况下完成货架搬运任务。另外,和文献中的一种启发式算法相比,该方法求得的AGV运动规划方案所需要的平均最大完工时间更短。
其他文献
近年来,在国家政策和地方政府投资驱动的双重引导下,很多政府类固定资产投资项目采用PPP模式运作,越来越多的建筑企业参与PPP项目的投资、建设和运营,以PPP项目投资带动施工总承包业务的发展。在PPP模式下,建筑企业既是社会资本方又是施工总承包方,在PPP项目财务管理方面更需要统筹兼顾。本文就PPP模式下的建筑施工项目财务管理进行研究,通过对PPP模式相关概念及PPP模式下建筑企业财务管理出现的问题
通过搭建柴油机后处理试验台架,分析了不同碳载量下燃烧器再生与喷油助燃氧化再生时的柴油氧化催化器(DOC)与柴油机颗粒捕集器(DPF)内部温度场,研究了不同再生方式在不同碳载量下的再生特点.并运用计算流体动力学(CFD)软件建立了燃烧器数值仿真模型,分别研究了补气量、喷油量、喷油锥角和喷油压力对燃烧的影响规律以及对出口温度、速度均匀性和压降的影响.结果表明:在相同碳载量下,采用燃烧器再生的再生效率高
3P项目融资链包括很多内容,具体实践中有多种因素都会对其产生影响,如众多参与方、较大投资规模、复杂交易结构、庞大合同体系等。由此看来,管理项目过程中,必须应用有效的风险防范措施,从而有效控制3P项目风险。基于此,本文对3P项目投融资风险进行分析,并且提出相应的防范风险措施,希望给有关机构提供参考与借鉴。
交通基础设施建设所需资金数额巨大,PPP模式有助于实现交通基础设施融资多元化,其中项目融资工具包括信贷、股票、资产证券化、债券等。通过构建线性规划模型,并运用Matlab进行求解得到各融资方式基于最小融资成本的最优配置,为项目方融资方案的选择提供参考。
运用结构方程模型(SEM)构建我国PPP项目可融资性影响因素理论模型,使用1,010份调查问卷获取数据,利用SPSS22.0、AMOS17.0等量化工具实证研究了中国政府与社会资本合作(PPP)项目可融资性的影响因素。实证结果显示:公司融资能力相适性、项目可实现性和财务可持续性对PPP项目可融资性具有显著正向影响;财务可持续性分别在公司融资能力相适性、项目可实现性、政府履约保障可靠性、增信措施有效
初中时期的物理学科有着很强的理论性和实践性,这一时期的物理学习对学生有着一定的启蒙意义,教师必须重视物理教学的开展,认识到物理实验对物理教学质量的提升作用,帮助学生在实验过程中掌握基础的物理知识。此外,合作学习的方式能促进学生协作能力的提升,还能确保学生的课堂核心地位,激发初中生的物理学习热情,同时还能顺应新课程改革的趋势,
期刊
截至2019年底,贵州省遵义市十余年共筹资融资1808.7亿元,开工建设了1377公里21个地方高速公路项目。此外,还建成投用了甘肃兰州至海南海口高速公路遵义至贵阳段扩容、浙江杭州至云南瑞丽高速公路遵义段、道真至瓮安高速公路等几个国家高速公路项目。这既得益于中央加快西部大开发的正确决策、我国经济社会高速发展的大好形势,又体现了贵州省委、省政府和遵义市委、市政府"大手笔办大交通""大交通带动大
期刊
针对现有的AGV(automatic guided vehicle)在大规模未知复杂环境中进行自主导航配送的问题,基于深度强化学习完成了AGV智能导航系统设计。首先,结合传感器对周围的障碍物进行探测感知,利用DDPG(deep deterministic policy gradient)算法实现AGV小车从环境的感知输入到动作的直接输出控制,帮助AGV完成自主导航和避障任务。此外,针对训练样本易受
民粹主义思潮是一种群体性的社会思潮,广义上看,民粹主义思潮包含着极端的平民思想,将抽象的“人民”意见作为政治制度与政治运动的唯一合法性来源,推崇普通人表决式的直接民主方式,刻意贬低或反对精英阶层在社会中的价值与作用,是主张绝对公平化的一种政治策略。狭义上看,民粹主义思潮因其本身在政治、经济、文化层面的左翼和右翼的偏离特性,反映出了不同的特点,严重的拜民性、非理性、无序性是其核心特质。习近平总书记在