基于深度学习的智能机器人目标抓取位姿估计方法研究

来源 :长沙理工大学 | 被引量 : 0次 | 上传用户:syx
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着工业产业结构升级,机器人行业得到空前的发展机会,为了提升机器人的作业效率,基于视觉检测姿态估计的机器人控制技术迅速被广泛深入研究,有效引导机器人执行精准控制作业。因此,论文提出基于视觉检测的姿态估计引导机器人执行抓取控制,结合深度学习在视觉检测的稳定性优势,训练神经网络识别目标物,得到的输出结果引导机器人执行抓取操作。同时,搭建一个完整的智能机器人抓取系统对算法验证。论文探究了虚拟数据训练神经网络的应用,制作的数据集用于姿态估计算法。首先,制作目标物模型,其物理比例与真实物体保持一致,把模型导入虚拟场景合成训练数据集,其中数据集由随机背景数据和照片真实级数据的两部分组成。接着,利用制作的数据集探究基于改进DOPE的姿态估计算法。提出使用残差网络结构改进特征提取网络和优化分支任务网络,保持原有的检测准确度和提升检测速度。根据网络输出的数据处理,保留有效的数据信息导入PnP算法进行姿态估计。接着,探究了视觉检测的机器人抓取控制。首先,对机械臂和相机进行手眼标定,得到图像坐标系到机器人坐标系的坐标转换关系,姿态估计值通过坐标变换关系得到机器人抓取目标物的控制量。与此同时,为摆脱仅依赖姿态估计算法执行抓取的局限性,加入机器人安全抓取的机制。改进的语义分割网络分割2D图像,并进行连通域分析,得到目标物在2D图像的准确位置。然后深度相机对分割的2D图像和相应3D点云进行匹配,得到目标物的分割点云集,并把目标物的点云集中心作为测量平移量与神经网络的预测平移量加入安全抓取的平移量矫正算法,方可执行目标物抓取。最后,搭建智能机器人系统探究机器人的抓取实验,分别介绍系统的硬件组成和软件设计框架,建立机器人的抓取场景和仿真场景。实验探究在复杂条件下的目标物抓取效果,实验表明能够有效地完成目标物的识别与抓取。
其他文献
随着智能机器人在非结构化应用环境下的快速发展,其对触觉传感技术的需求亦与日俱增。触觉传感阵列装载在智能机器人手上,在手指滑动过程中可用于滑移、纹理识别等触觉感知,进而提高机器人的智能化水平。本学位论文结合国家自然科学基金(项目编号:51575485)和浙江省自然科学基金杰出青年项目(项目编号:R19E050011),开展了柔性触觉传感阵列的力学理论建模,并在此基础上对传感阵列的滑移检测方法和物体表
面向服务的软件体系结构中,将软件系统的功能看作是软件系统所提供的服务。随着软件系统复杂性的不断增长,当前的主流软件开发模式均倾向于尽可能使用系统所提供的或所开发的
城市的发展离不开规划。改革开放以来,规划在促进经济社会全面协调发展、改善城乡生活环境等方面发挥了重要作用。政府各部门为实现发展目标纷纷编制了各自领域的规划。但由于缺乏统领全局的综合规划,我国空间规划体系呈现多规并行、各自规划的状况,各类规划缺乏协调,内容重叠冲突,部门交叉管理、事权不清,造成了规划难以实施,建设项目落地难。城乡规划作为政府干预的一个重要手段,规划的编制与实施涉及到政府各部门、市场和
《主题变奏曲》以歌曲《卖汤圆》的主题为创作素材,通过丰富的变奏手法和多样化的演奏技法创作而成。是一首专门为钢琴而创作的独奏乐曲,着力展现钢琴宽广的音域和丰富的表现
随着当今世界发展的异常迅速和人们对各种能源的需求越来越高,而地球上的不可再生能源日益减少,因此人们将目标转向新能源。基于此,本文对光储型直流微电网中双向AC/DC变流器的运行模式进行了深入分析,提出了基于传统PI控制的新型双闭环控制策略和基于自适应滑模改进型模型预测直接功率控制策略,并建立了相应的仿真模型,最后通过实验验证该策略的可行性。本文的研究内容如下:(1)介绍了光储型直流微电网的整体结构,
作为一般逻辑连接词的推广,直觉模糊逻辑连接词的特殊情形已有研究,并应用于直觉模糊粗糙集理论的研究中.然而,作为更一般的情形,直觉模糊逻辑系统及其与直觉模糊粗糙集之间
哲学体系来源于我们的语言逻辑构架体系,而哲学的思考又直接影响了各个时期的艺术面貌。瑞士语言学家索绪尔创立了结构主义,但只适用于于语言学范畴,罗兰·巴特将索绪尔的语
储层保护涉及大量实验分析以及现场测试,积累了许多不同储层的实验数据和保护经验。这些资料为制定储层保护技术方案提供数据支持。然而,目前塔里木油田储层保护数据库建设还
随着信息技术的高速发展,数据呈现指数增长的趋势,海量数据的存在对于社会与科技的发展是机遇也是挑战。大数据给传统的技术带来了难题,海量的数据存储与处理得到了社会各界
电动自行车价格低廉且轻巧便捷,是配送行业最后一个环节的首选工具。无人驾驶能够提升送货效率、降低人力成本和减少交通事故。无人自行车可为配送服务提供一个理想的方案。