面向机械臂抓取的视觉感知方法研究

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:tank2203555
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着机器智能技术的发展,机械臂抓取在机器人操作、装配等场景得到了广泛的应用,现有的机械臂抓取方法需要精确感知空间中物体的6D位姿。然而,机械臂抓取场景中通常存在着传感器视野遮挡、物品堆叠等不利于感知的因素,使现有的感知方法难以满足机械臂抓取对精度与稳定性的需求。此外,对高成本物体位姿标注数据的依赖也使现有感知方法难以在不同物体与场景间进行快速迁移。针对上述问题,本文将针对机械臂抓取场景中的视觉感知方法开展研究,以提高物体位姿估计方法对遮挡的鲁棒性,并消除其对高成本标注数据的依赖。本文的研究内容和成果主要包括以下几个方面:(1)针对现有视觉感知方法不适用于严重遮挡场景的问题,设计并实现了一种对环境遮挡高鲁棒性的物体位姿估计方法Temporal Fusion。该方法基于RGB-D图像序列构建时空融合特征,并使用注意力增强的卷积神经网络回归物体的6D位姿,有效提高了物体位姿估计方法在严重遮挡下的性能。实验结果表明,本方法达到了99.3%的位姿估计精度,且可以对完全被遮挡物体进行位姿估计,优于现有的领先方法Dense Fusion。(2)针对现有物体位姿估计方法难以获取位姿标注数据以快速迁移的问题,提出并实现了一种无监督标注生成与弱监督学习方法Weak6D。该方法构建了适用于弱监督学习的物体位姿估计网络,提出了无监督生成优化目标的迭代优化解析器,并使用弱监督学习方法训练网络模型。实验结果表明,Weak6D无需任何物体6D位姿标注数据即可达到98.4%的位姿估计精度,与有监督学习的领先方法Dense Fusion接近,使视觉感知方法可以在机械臂抓取任务中快速迁移。(3)针对现有机械臂抓取的应用验证中缺乏感知方法验证平台的问题,搭建了具有完整机械臂与环境模型与开放接口的仿真平台。该环境具有机械臂抓取任务所需的机器人、待抓取物体、放置平台与环境光照等可控模块,并设计了所需的开放控制与状态读取接口,适用于对机械臂抓取中感知方法的验证。本论文提出的物体位姿估计方法Temporal Fusion与Weak6D实现了机械臂抓取场景中的高鲁棒视觉感知,并克服了现有方法对高成本位姿标注数据的依赖。因此,本论文提出的视觉感知方法在严重遮挡下同样可以满足机械臂抓取的视觉感知需求,并可在多种抓取场景与物体间进行快速迁移,具有较高的应用前景。
其他文献
传统电子电路/器件的微图形化方法均以“蚀刻减成法”为工艺路线,工艺流程复杂、生产周期长、材料浪费大、生产成本高且环境相容性差,在进一步实现电子产品大面积制造及超低成本制造方面难以突破。“全印制电子”(All Printed Electronics,APE)技术是近几年发展起来的电子电路/器件制作方法,该方法以“加成法”为基本图形化工艺路线,相较于“减成法”繁琐的制备工艺、高昂的制备成本以及严重的材
学位
在高精密光学仪器或激光武器系统中常常需要对外界或内部产生的杂散光进行吸收或屏蔽,黑色膜层具有包括可见光全部波长范围内的吸收能力,是表面吸光处理的首选方案。仪器设备实际服役过程中常会面临外界环境或仪器运行过程中产生的振动、温度变化等,若膜层与基体结合力不足会导致膜层脱落。微弧氧化技术作为一种新兴的表面处理技术可以制备出硬度高、结合力强、耐磨的黑色膜层。本课题以6061、2A12、7075铝合金为基体
学位
《传统中国女性》(Women in Traditional China)是美国作家海伦·福斯特·斯诺(Helen Foster Snow)研究中国传统社会女性的一本学术专著。该书通过讲述中国的母系社会、母系与母权制、婚配制度、性别与宗教、社会风俗等内容,展示了特定历史时期中国女性面临的社会现实问题。全书史料充分,结构清晰,论述严谨,写作风格纪实,属于历史类学术文本。本翻译实践报告综合运用文本分析、
学位
我国制造业高技能人才短缺背景下,继续教育学院作为培养技能型人才的重要支撑力量,其发展受到社会各界的重视。纵观国内外,英国是“继续教育之乡”,办学经验丰富,教学制度相对完善,因此,研究分析《英国继续教育学院2030年发展目标》汉译实践在一定程度上有利于我国继续教育事业的发展,助力制造业高技能型人才培养。该翻译实践文本为教育类报告,重在提出英国继续教育学院2030年发展目标及相关建议,以达到革新继续教
学位
本报告所选取的翻译文本为世界史类学术著作《叙利亚战争幸存者》。《叙利亚战争幸存者》由牛津大学出版社于2021年出版,作者为中东学者贾斯汀·肖恩(Justin Schon)。作者以叙利亚难民流散到邻国土耳其的事件为背景、以叙利亚难民在土耳其的生存状况为基础、以作者对当地叙利亚难民的访谈内容为资料,最终写成《叙利亚战争幸存者》一书。此著作整体语言风格简洁、观点客观、措辞严谨,充分体现了学术著作应有的专
学位
近年来,铅基钙钛矿太阳能电池因其优异的光电性能而受到光伏领域内的广泛关注,其效率从2009年的3.8%迅速飙升到2021年的25.7%,但铅基钙钛矿中铅的毒性对环境存在着潜在的危害。锡基钙钛矿由于具有无(低)毒性、较小的光吸收带隙、高电荷载流子迁移率等优点,因此被认为是最有前景的铅基钙钛矿替代物之一。然而,其最高光电转换效率为14.81%,仍与锡基钙钛矿太阳能电池理论值(33.4%)相差甚远。相对
学位
本翻译实践的材料选自美国哲学系教授迈克尔·斯洛特(Michael Slote)的最新专著《心理学与哲学之间》(Between Psychology and Philosophy),本文作者选取斯洛特的这篇文章进行翻译研究,以期为今后同类型文本的翻译及研究提供一些借鉴参考。源文本是一篇学术著作,语言精炼,用词严谨,长难句较多,属于典型的信息型文本。结合此类文本的文体特点,本文作者选择彼得·纽马克(P
学位
《外语教学法和翻译研究中的对应与对比》是一部学术论文集,属于信息类文本,主要内容是作为外语的英语和母语波兰语之间的对应和对比,以及这种对应与对比在外语教学和翻译研究中的作用。本翻译实践报告对该书第一章和第二章进行了翻译,并将其作为本次翻译实践的研究对象。该书第一章重点关注英语作为通用语在欧洲国际教育项目中的使用,展示了英语作为国际语言(英语作为通用语)的新功能;第二章提出了一种基于隐喻的语言模型,
学位
目前,研究人员已经发展了若干种基于机器学习的禁带宽度预测的方法,并且取得了较好的预测能力。然而,这些预测方法往往使用了很多的描述符,并且这些描述符中的相当一部分与禁带宽度不具有很强的关联性。因此,本工作将通过引入物理领域知识,基于物理模型构建新的特征描述符,从而优化和减小描述符的数量,最终达到仅使用较少的几个简单描述符就能实现禁带宽度准确预测的目的。在本研究中,首先,获取了一种实验禁带宽度数据集和
学位
航天电子产品是航天器的重要构成部分,其有效工作寿命是航天器的重要设计指标之一。在实际运行过程中,航天电子产品的工作寿命不足会给航天器整机的可靠性带来巨大隐患,甚至导致航天器工作提前结束。因此,在航天器设计过程中不得不设置过多冗余和备份电子产品,从而保证航天器的可靠运行,但这又会造成航天器体系复杂、超重和功耗高等方面的问题,对航天器整机的设计带来不利影响。为了准确控制航天电子产品的寿命从而保障航天器
学位