基于视觉的机械臂目标跟踪与抓取方法研究

来源 :青岛科技大学 | 被引量 : 0次 | 上传用户:jiebaidexue
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为提高机器人复杂场景下的目标抓取能力,本课题以串联机器人抓取传送带上运动的堆叠物体为例,设计了基于视觉的机械臂目标跟踪与抓取方法,并对方法中的目标检测及跟踪抓取等关键技术进行了研究。首先概述了机器人定位抓取方法及关键技术的研究现状,引入了研究内容及研究框架。通过分析机器人抓取的任务及难点设计了基于立体视觉的抓取方案,并对方案中的立体视觉进行了原理分析及实验验证。然后对融合深度学习的目标检测技术进行了研究。采用基于深度学习的目标检测方法对图像进行了目标区域筛选,通过缩小图像中目标的检测范围来优化传统的基于图像分割的目标检测过程。对基于图像边缘的特征点检测方法进行了过程优化,首先依据目标匹配的轮廓像素点进行图像重建并形成新的目标检测区域,随后对目标检测区域进行角点的检测并获取详细的特征点坐标,将物体边缘特征的提取问题转化为角点的检测,在双目图像下对特征点进行匹配进而快速实现目标特征点空间的坐标重建。接着对运动目标跟踪抓取这一关键技术进行了研究,为应对物体的多样化姿态,通过目标特征点立体几何运算创建了模型不同姿态的坐标系并设计了相应的抓取姿态。针对生产线上动态目标的跟踪和抓取任务,采用了基于位置的视觉伺服系统的研究方案,同时对末端执行器的跟踪抓取路径进行优化以提高机器人抓取效率。为提高跟踪过程中末端执行器的位置定位的精度,在跟踪抓取的方法应用位置估计算法,建立了基于Lucas-Kanade参数优化的Kalman滤波数学模型。最后搭建了实验的硬件平台和软件操作界面,通过手眼标定实验实现了立体视觉系统和机器人抓取系统的坐标转换,解算出抓取位姿,完成了目标物体的三维位姿估计。对不同堆叠状态下的运动物体进行目标搜索和位姿提取的跟踪抓取实验,论证本课题各关键技术算法的有效性。
其他文献
原油是我国国民经济发展不可或缺的重要能源,从新开采的原油到现实生活中的成品油,需要经过固体杂质分离、气体杂质分离、原油与污水分离等过程,其中油水分离过程仍然是国内外研究人员的一项难题。虽然国内外研究人员在油水界面检测中取得了一定成果,但是原油与污水之间的界面检测与油水分离控制系统仍然需要进一步改进。针对现有的油水界面检测方法精确度不高的问题,本文采用改进K-means图像分割算法来获取原油与污水之
当前,高校公共卫生突发事件已经成为危及高校乃至社会稳定的突出问题。高校人流量大、接触性强,往往因用户间的移动行为而造成人群聚集情况,同时,经过调查发现,公共卫生突发事件在高校等人群聚集区发生的可能性较大,具有爆发性强、不易处置等特点。因此,判断高校用户的行为轨迹对于预判公共卫生突发事件爆发和防止公共卫生突发事件扩散具有重要意义。本文以高校用户移动轨迹为研究对象,提出了基于移动模式的马尔可夫位置预测
现代社会的发展,人民生活水平的不断提高以及出于对生活工作的实际需求,极大地刺激了汽车消费市场,然而泊车用地的建设速度却远不及汽车拥有量的增长速度,再加之土地价格飞涨,由此造成的停车位供需矛盾日益激化。本文主要是从当前市场的实际需求出发,设计一种液压汽车举升机,通过优化结构设计使其具有适用范围广、成本低廉、结构简单且占地面积小等优点,可以有效解决停车难问题。首先是以四柱式液压汽车举升机为研究对象,通
随着商业互联网的蓬勃发展以及移动通信技术的快速升级,人们可以随时随地完成一系列众包任务,例如汇报当前道路堵车信息以及当前该区域的天气信息等。这些任务带有明显的时间和空间属性,从而产生了时空众包这一计算范式。时空众包不仅方便了人们的日常生活,也推动了像美团、优步等时空众包平台的发展,在今后智慧城市建设中发挥着日益重要的作用。在时空众包中,任务分配不仅是基础,更是关键所在,一个合理的任务分配,是时空众
图像分割是人工智能、计算机视觉领域的重要研究内容。医学图像分割是指将医学图像分成若干个区域,并将图像中的感兴趣区域精准地提取出来,是决定医学图像在临床诊疗中能否提供可靠依据的关键问题,对疾病诊断、手术规划和预后评估等临床应用具有重要意义。本文旨在研究基于深度学习的医学图像分割方法,特别针对MRI图像中病灶区域较小、边界不显著、轮廓复杂多变等问题,提出了基于注意力机制的图像分割算法,在目前公知的数据
针对传统空间刚体机器人存在的自由度有限和环境适应性差等缺陷,基于生物体结构提出了一种受“尺蠖”与“蛇”启发的适用于空间在轨服务的柔性机器人.首先,搭建了柔性机器人原型样机,研究了镍钛形状记忆合金(SMA)驱动器的驱动特性,设计了可视化控制界面并通过实物实验验证了机器人原型样机的可操控性.然后,设计了一种基于所提柔性机器人结构的Q学习算法和相应的奖励函数,搭建了柔性机器人仿真模型并在仿真环境中完成了
界面太阳能水蒸发技术是解决能源和淡水资源短缺问题的一种绿色可持续解决方案,具有潜在的应用价值。要实现高效的太阳能驱动界面水蒸发要求水蒸发系统具备以下三个特性:(1)全太阳光谱内宽频高强度光吸收;(2)适当的热管理;(3)有利于水输运的微纳结构。为了获得高效的水蒸发,本文通过涂覆/煅烧制备了Ni Co2O4/玻璃纤维复合材料,通过固相烧结制备了Cu Cr2O4/硼硅玻璃,对太阳能水蒸发相关性能进行研
为筛选适合辣椒生长的黄腐酸型套餐肥,提高辣椒产量和品质,研究了不同黄腐酸型套餐肥在辣椒上的施用效果。结果表明,与常规施肥相比,不同黄腐酸型套餐肥均能促进辣椒生长,增加辣椒株高和茎粗,提升辣椒果实品质,提高辣椒产量。套餐肥T2处理[黄腐酸复合肥1(22-18-5)+黄腐酸复合肥3(18-8-18)]比常规施肥处理的辣椒株高、茎粗增加29.8%、11.1%,Vc含量显著增加89.2%,增产率达到25.
为了降低粉末涂料的固化温度,减少喷粉线的综合运行成本,对低温固化粉末涂料在搅拌车结构件上应用的可行性进行了研究。选取了某国际知名粉末涂料供应商提供的常温固化粉末涂料和低温固化粉末涂料进行对比,对其固化条件进行了验证,并测试了涂层的光泽、附着力、铅笔硬度、耐冲击、耐碱、耐酸、耐中性盐雾、耐人工加速老化等性能。对低温固化粉末在搅拌车结构件喷粉线上的应用进行了综合分析和评估。通过使用发现:低温固化粉末涂
加强数学思想方法在中小学数学教学过程中的有效渗透具有非常重要的意义。良好的数学思想方法能够更好地提升学生的数学能力,运用数形结合、化归、方程、特殊化等数学思想与方法解决数学问题,能达到巩固和运用数学知识、提高学生数学素养的目标。因此,教师在中小学数学教学中要利用有效的教学手段,不断加强数学思想方法的渗透。