基于深度强化学习的虚拟装配路径规划方法研究

来源 :华北电力大学 | 被引量 : 0次 | 上传用户:liyibo6941
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
虚拟装配是虚拟制造的重要组成部分,利用虚拟装配,可以验证装配设计和操作的正确与否,以便及早的发现装配中的问题,对模型进行修改,并通过可视化显示装配过程。路径规划是虚拟装配的一个重要发展方向,研究虚拟装配环境下的路径规划技术对于复杂环境的装配路径设计具有十分重要的意义。装配路径规划是从产品的装配起点出发,根据装配环境的特点及待装配零部件与其它零部件的相对位置关系等信息进行路径求解,并最终获得一条满足装配要求的无碰撞路径。在计算机上搭建虚拟装配场景,实现装配路径的规划,可及时验证装配产品零部件的装配有效性。但是路径规划主要用于机器人领域,通过传感器识别简单环境,根据环境建模对路径进行规划。而虚拟装配中具有大量复杂环境,不容易被建模且包含狭窄空间,传统路径规划算法无法保证复杂环境下的通行性和规划效率,因而不适宜直接运用在虚拟装配的复杂环境中。针对虚拟装配中自由空间相对狭窄而造成的复杂环境通行性问题,提出了通过跟踪和反馈的方式学习最优的动作序列决策的深度强化学习。本文基于深度强化学习实现了虚拟装配的路径规划,主要完成了以下几个方面的问题:(1)介绍了路径规划领域的发展和研究现状,通过分析国内外的研究成果和实际问题,归纳出本文所解决的问题:虚拟装配中因自由空间相对狭窄而造成的复杂环境通行性问题。(2)详细介绍了深度学习和强化学习的基础理论,在分析深度学习和强化学习的算法原理和适用性的基础上,本文提出利用深度强化学习来解决虚拟装配的路径规划问题,该方法将深度学习的感知能力和强化学习的决策能力相结合,适用于解决序列决策问题。(3)将虚拟装配的路径规划问题转换为寻路的序列决策问题。从理论上验证,本课题提出的深度强化学习能够训练深度网络来解决自动寻路问题。(4)本文为了验证模糊贝叶斯-深度Q网络算法在虚拟装配环境中的实验效果,对虚拟装配的复杂环境进行了模拟,在模拟环境中对算法进行了研究确保该方法的可行性和有效性。对虚拟装配中具有狭窄空间的复杂环境具有较好的通行性和规划效率。
其他文献
一、精细整地为创造良好的种床,做到土壤细碎,墒情适宜,垄形标准,在上年整地的基础上,采用液压重耙带道轨进行再次复式整地为作物正常生长创造良好的耕作基础。为减少重茬对
含氟丙烯酸涂料具备传统涂料无法达到优势,本文对含氟丙烯酸涂料树脂、颜填料和涂料配方等方面进行分析,并对取得的成果进行探讨。
后备母猪发情可通过许多日常管理来实现,与成熟公猪的接触来刺激,可使发情日龄提前.在诱情过程中,公猪要经常替换,避免习惯性,以保持兴趣.公猪单独饲喂,每天将公猪赶到母猪栏
在经济飞速发展的时代,成功的市场营销是企业经营管理活动的重要内容,不仅能吸引消费者对企业产品的关注度,提升企业的市场竞争能力,还能为企业树立良好的经营形象和品牌价值
<正>从严治党,重在从严管理干部。吏治清明,才能政治清明。2014年以来,东方市委认真落实全面从严治党的主体责任,坚持聚焦问题、突出重点,健全预防、发现、纠偏的党员干部管
弱势群体目前已经成为社会各界关注的焦点,构建社会安全网就成为了社会主义中国和市场经济制度必须加以解决的问题,同时也是中国全面建设小康、构建和谐社会必须经历的进程。
广大外向型民营企业的加工贸易为国民经济发展和社会就业做出了巨大的贡献.但是,长期以来,在国际产业链分工与价值链增值中,民营出口企业一直居于低端位置,附加值低.本文借助
新能源车辆远程监控优化设计系统的远程管理终端系统采用车载信息功能集成方法,完善网络化的智能交通状态体系。云端信息服务平台的数据云存储系统采用创新的云存储服务方法;
健康黄羽鸡鸡冠鲜红、纹理均匀,鸡眼圆润有神,病鸡鸡冠萎缩变色、鸡眼半闭或全闭。本文提出了一种基于鸡冠及鸡眼构成的鸡头特征信息的病鸡识别方法。首先通过R、G、B分量色
<正>3月28日,经国务院授权,国家发展改革委、外交部、商务部联合发布了《推动共建丝绸之路经济带和21世纪海上丝绸之路的愿景与行动》,明确提出:要"推动21世纪海上丝绸之路邮