目标明确的释放型操作示教与增强学习研究

来源 :中国科学院大学(中国科学院深圳先进技术研究院) | 被引量 : 0次 | 上传用户:tianyawoaiai
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
机器人技术发展迅速,但是机器人操作一直以来依赖传统规划方式,没有智能性与自主决策能力,对于一些复杂操作任务以及无法准确建立环境动力学模型的场景无法胜任。机器人学习方法为机器人操作开辟了一条新道路,通过自主学习避免直接环境建模,获得完成任务的能力,是一个非常热门的研究方向。在各种机器人操作中,释放型操作作为这些操作中的一个典型,具备大部分操作的轨迹生成阶段、轨迹重现阶段以及轨迹优化阶段。本研究最终以释放型操作作为一个典型例子对示教学习以及增强学习在机器人操作方面的应用做进一步的研究。具体是用一个四自由度的WAM机械臂推动一个圆柱体到目标区域。希望能够借助这一研究,将示教学习与增强学习方法的应用推进一步。首先需要示教学习方法提供一个初始解。机器人的运动可以由一个通用的动力学模型来大致表示,然后复现出来,并且可以通过调节模型的参数来对运动进行适当的调整,用来适应环境和目标的轻微变化。动态运动基元法由一个二阶弹簧阻尼系统来适应环境和机器人的动力学模型,并且在系统中加入一个拟合项模仿机器人运动轨迹。从而将复杂的动力学模型转换为参数较少,更加简单的模型。为机器人学习操作提供了初始解。本文结合自己的实践,对传统的虚拟二阶弹簧阻尼系统进行改进,加入多虚拟弹簧阻尼系统,将示教学习轨迹信息与目标信息解耦,将时变转换为时不变,提高了示教的灵活性。得到初始解后,再由增强学习方法优化。基于路径积分的策略提升方法将动态运动基元得到的轨迹进行代价值量化,高代价对应轨迹具有较低的概率,以此更新动态运动基元模型参数,直到机器人能够很好的完成操作任务。
其他文献
学位
刘慈欣的科幻小说叙事,集“科学性”“文学性”和“幻想性”等要素于一身。既有对于科学技术理论细腻的描绘,也有属于普通文学对科技和人文多元化角度的深入思考。与以往的中国科幻小说相比,刘慈欣科幻小说的叙事内容,具有明显的“硬科幻”特征。不同性格、年龄和性别的人物,都被打上了标签化的烙印,给人以一定程度的“硬化”感。而在故事的发展变化中,则巧妙嵌入“硬”科学理论作为情节的基本支撑。对比刘慈欣早期与中后期的
局部时变信号广泛存在于视频监控、工业控制、电力系统、水下信号传输等现实世界中,如何降低连续局部时变信号的带宽和节点电能消耗,同时高效稳定地进行信号传输一直是研究的
在生物学的定义中,会说话和能够借助工具是人和其他动物最本质的差别。语言也是自人类诞生以来所依赖的重要的交流工具,语言具有自然且方便,简洁且明了,准确且高效等优点。语
中国IT行业是一个年轻的行业,从80年代初世界计算机业的快速崛起,到21世纪初进入互联网时代,再到现在的移动互联时代。IT这个概念从原来单纯的计算机到现在的多元化的信息技术。行业模式不断的被重新定义。销售模式也在不断的变化。新的产品的诞生不停地创造着客户的需求并且改变着客户的生活。IT公司、IT品牌之间的竞争不断加剧。本文将对S公司的实际情况做深入调研,用大量数据和具体的改革实施方案,并通过分析S
在复杂场景下进行目标的成像探测,尤其是虚假、伪装、隐身人造目标的识别,已经成为当今战场环境分析、情报获取、目标侦察的重要研究课题。传统强度成像探测只是利用传感器捕获目标的光强信息,而实际应用中,由于被测目标辐射光通过复杂背景环境时,光强信息会受到一定程度的减弱,导致所得图像模糊、精度低、识别能力差。而偏振成像技术不仅可以获取被测目标的光强信息和偏振信息,还可以凸显隐藏或肉眼难以区分的人造目标,从而
自从秘密共享的概念被提出以来,秘密共享理论得到了众多学者的深入研究,并将秘密共享方案运用于当代信息网络安全的各个方面。由于信息保密的观念越来越深入人心,如何保护信
近年来,随着我国进行大规模的高速公路工程建设,不可避免地会有相当数量的隧道工程开挖,其产生的隧道弃渣也随之越来越多。目前,由于受到技术条件的限制,开挖出来的隧道弃渣利用率低,大多都是将其作废弃处理,这就难免会对周边的生态环境造成破坏。因此,将隧道弃渣在水泥稳定碎石基层中的应用作为研究课题具有非常重要的现实意义。本文依托广东省汕湛高速公路惠清段实体工程,隧道在开挖过程中产生大量花岗岩弃渣。针对花岗岩
教育是全面发展人类社会的基础。因此党和国家针对西藏教育的特殊性,大量发放特殊津贴,使得在校学生享受到了“三包”政策。“三包”政策的实施,解决了农村学生的吃穿住和学习用
统计资料显示,管道企业每年由于燃气泄漏、盗用造成的输差约占5%,造成了巨大的经济损失。随着我国城市化进程的加快,环保要求的不断提高,天然气在能源消费结构中不断提升,国家发布《天然气管道运输价格管理办法(试行)》《天然气管道运输定价成本监审办法(试行)》以及《关于加强配气价格监管的指导意见》等政策文件,加强燃气价格确定及监管要求,要求输差原则上不超过5%,三年内降低至不超过4%。但是埋地管网因其隐蔽