基于3D视觉堆叠混乱目标的机器人无序分拣研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:xiaotao_8730
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当下工业技术和机器人技术处于不断革新和发展中,机器人无序分拣技术在生产制造、搬运码垛以及智能物流等领域中起到越来越重要的作用。本文针对非结构化环境下的目标自动化抓取任务,开展了基于3D视觉堆叠混乱目标的机器人无序分拣研究,主要包括了堆叠混乱目标的点云分割、目标点云筛选和识别、目标6D位姿估计和抓取三个方面,并设计了无序分拣系统软硬件平台,进行实验验证本文方法的可行性,最终实现堆叠混乱目标的机器人无序分拣。主要研究内容如下:堆叠混乱目标的点云分割是目标识别和位姿估计的关键基础,点云分割的精度直接影响后续识别和位姿估计的准确性。首先基于Kinect V2深度相机获取场景的深度图像和彩色图像,针对深度图像数据缺失导致产生点云空洞的问题,采用像素滤波方法对深度图像进行处理;从场景点云中提取出目标点云,引入移动最小二乘法对目标点云平滑,以提高点云表面的法线估计精度;最后提出一种基于局部凸性准则的点云分割方法,在原始区域生长策略的基础上加入局部凸性判断准则,实现目标点云的精确分割。为了确定机器人分拣过程中目标之间的抓取顺序,通过分析点云子集的内部属性,提出一种基于抓取分数的目标筛选方法,确定各个目标的上下层级关系。为了实现目标点云的识别,从目标点云和模型点云中分别提取SIFT3D关键点构建FPFH三维局部特征描述子进行匹配,根据特征匹配关系计算匹配相似度对目标进行识别。针对目标点云和模型点云重合率低的问题,采用截断最小二乘-半定松弛算法快速进行点云配准,获取粗略的目标6D位姿,进一步基于迭代最近点算法对位姿进行优化,最后结合手眼标定的结果进行位姿转换获取目标在机器人基坐标系下的6D位姿,进而控制机器人完成目标的抓取。设计了机器人无序分拣系统的软硬件平台,验证系统对堆叠混乱目标的分拣性能。分别对堆叠混乱目标的点云分割、目标的6D位姿估计以及堆叠混乱目标的机器人无序分拣三方面进行相关的实验,通过实验数据的对比,证明本文提出的点云分割方法和目标位姿估计方法在精度和效率方面的优势,并在实际场景中完成堆叠混乱目标的机器人无序分拣,验证了系统的有效性和可行性。
其他文献
新能源需求日益增长,分布式光伏发电产业规模不断扩大。而光伏发电因受多因素影响而极不稳定,不利于电网安全和电力调度。因此,建立分布式光伏储能发电监控系统,对系统状态进行实时监测,预测未来发电功率,实现对光伏系统的监控意义重大。本文分析了分布式光伏储能发电功率预测与监控技术的发展现状,设计光伏功率预测模型并将其嵌入监控系统,建立上位机与远程监控系统。论文主要工作如下:(1)设计光伏储能发电监控系统总体
学位
水下焊接技术在海底管线铺设、深远海域海上风电开发、海上基地级舰船维保及在役修复、强辐射核事故应急水下修补、人工岛礁建设等大型涉水结构物的建造及后续维修保障领域具有重要作用。特别是局部干法焊接不仅集成了湿法焊接操作简单、成本低的优点,同时又具备干法焊接对电弧保护的效果,具有十分广阔的应用前景。局部干法水下焊接中,熔滴过渡决定了焊缝成形,同时也是焊接过程的重要研究目标。而局部干法水下焊接由于存在受水影
学位
塑料性能好而且成本低廉,已经成为当今经济活动中普遍使用的材料。虽然塑料制品的好处很多,但目前塑料经济的负面效应正日益凸显。由于塑料回收利用的低效率和高成本,研究高效清洁、低成本的废杂塑料回收技术具有重要意义。本文研究了废杂塑料回收的常用方法以及近红外光谱分析技术,提出了基于近红外光谱技术的废杂塑料识别与分选模型,论文主要研究内容如下:首先,使用近红外光谱仪采集了ABS、HDPE、LDPE、PET、
学位
激光定向能量沉积技术在航空航天、核能核电、汽车制造等领域的大尺寸金属零件直接制造、修复具有广泛的应用前景,其高效、高材料利用率的特点使其在工业4.0的发展浪潮中具有极其重要的战略地位。然而,激光定向能量沉积的成型件表面质量、尺寸精度较差,使该技术的发展受到了一定的限制。将激光定向能量沉积与铣削减材技术有机结合的增减材复合制造技术有效解决了这一问题,受到了国内外越来越多研究人员的关注。本文于自主研发
学位
随着电子信息技术与汽车工业的深度融合,汽车在智能化方向得到快速发展。作为实现汽车智能转向的最优解决方案,线控转向系统凭借其结构简单、布置方便、安全舒适等优点受到越来越多研究人员的关注。线控转向系统中取消了转向盘至转向车轮间的机械连接结构,通过转向电机实现转向操作,为进一步改善汽车安全稳定性提供了可能。本文以线控转向车辆为研究对象,提出包含上层横摆稳定性控制与下层车轮转角控制的分层控制策略,为提升车
学位
硬质金属材料表面精密制造依赖于超硬磨粒加工技术。金刚石磨粒硬度高和导热性好,但其石墨化温度仅为600~700℃,通常采用需切削液的耐高温CBN磨粒加工。为实现金属干式磨削,前期开发了脉冲放电热诱导石墨化的粗金刚石磨粒机械热化学修整修平技术,利用大面积的磨粒切削面快速导热,可干式磨削模具钢,达到高质量光滑表面,但脉冲放电功率受到加工过程中的放电间隙随机影响,导致金刚石磨粒修整过程不稳定,磨粒修平面无
学位
近年来,智能汽车发展快速,作为智能汽车的重要组件之一,线控转向(Steer-byWire,SBW)系统采用电信号代替了传统转向系统中的机械结构,提升了车辆转向的可控制性,然而众多的电子元器件同时也提升了故障发生的概率。本文以SBW车辆为研究对象,以保证车辆横向稳定性为研究目标,开展了故障模型搭建、控制器设计、仿真与实验验证等一系列工作,主要内容如下:第一,通过线控底盘转角测试实验发现了目前市面上的
学位
相比锂离子电池,钠离子电池凭借金属钠的储量丰富和成本低廉等巨大优势,受到专家学者们的广泛关注。然而,传统涂布工艺制备的平面结构电极存在活性物质利用率与能量密度较低等问题,制约了钠离子电池的发展。直写墨水3D打印和激光加工技术加工精度较高,可实现电极的快速成型,两者结合可按需制备三维结构化电极。为此,本论文提出采用3D打印(直写墨水技术)和激光加工工艺制备钠离子电池用三维结构化电极,探究打印浆料影响
学位
自动导引小车(Automated Guided Vehicle,AGV)作为一种集成了多种先进技术的智能物流装备,其自动化、高柔性、高效率以及并行作业性使得其在生产车间的物料运输上得到广泛的应用。调度优化可以降本增效,是工业生产系统中的重要环节,与仅考虑机器单一资源的传统生产调度不同,集成多AGV协同作业的生产场景更为复杂,其调度是一个更为复杂的NP-hard问题,需要考虑的调度约束更多。虽然可用
学位
ZrO2因具有耐高温、耐腐蚀、抗氧化、抗蠕变、高硬度等诸多优良性能,在航空航天、化学、冶金、电子、机械、生物医学工程等领域发挥着重要的作用。传统的成形工艺难以用于复杂形状陶瓷零件的制造,而模具的使用导致制造周期长、成本高,且模具往往受制于成形工艺无法广泛使用。粘结剂喷射增材制造技术具有成形效率高,无模成形,成型材料广泛等优点,可用于ZrO2的增材制造。光敏树脂粘结剂喷射增材制造不仅具有粘结剂喷射技
学位