【摘 要】
:
目前,随着物流行业的飞速发展以及人力成本的上升,在物流场景下的分拣搬运作业存在着非常大的自动化与智能化需求。本论文基于机器视觉技术,结合OpenCV视觉库以及TensorFlow深度学习框架,设计并实现了视觉引导分拣搬运作业解决方案。首先,阐述了智能物流系统的概念,并比较分析了物流环境下基于视觉引导的分拣搬运技术在国内外发展现状。以物流场景下多种纸箱的拆垛分拣搬运作业过程为研究对象,搭建了以计算机
论文部分内容阅读
目前,随着物流行业的飞速发展以及人力成本的上升,在物流场景下的分拣搬运作业存在着非常大的自动化与智能化需求。本论文基于机器视觉技术,结合OpenCV视觉库以及TensorFlow深度学习框架,设计并实现了视觉引导分拣搬运作业解决方案。首先,阐述了智能物流系统的概念,并比较分析了物流环境下基于视觉引导的分拣搬运技术在国内外发展现状。以物流场景下多种纸箱的拆垛分拣搬运作业过程为研究对象,搭建了以计算机为核心的视觉引导智能分拣搬运系统平台,包括机器人系统与末端执行器、图像采集系统及应用软件系统。通过对RGB-D相机的成像原理、相机标定原理、RGB-D配准对齐以及手眼标定原理的分析研究,标定出了相机内外部参数,建立了相机坐标系与机器人坐标系之间的相互转换关系。针对物流环境下多种类型纸箱的识别检测问题,基于TensorFlow框架下的Object Detection API,综合对比分析了 Faster R-CNN,SSD-MobilenetV1 以及 SSD-MobilenetV2三种目标检测模型的性能,选择采用了兼具实时性和准确性的SSD-MobilenetV2模型进行纸箱的识别检测,并通过优化数据集以及调整超参数的方式来进一步提高目标检测效果。在通过目标检测算法分割出的目标位置区域的基础上,针对纸箱的位姿估计问题,将纸箱分为表面无纹理或弱纹理以及表面图案丰富两大类来进行研究。对于表面无纹理或者弱纹理的纸箱,结合深度信息,并基于多次形态学开运算对采集到的RGB图像进行处理将纸箱分割出来,再通过边缘检测以及求取面积最小外接矩形得到纸箱的位姿信息;而对表面图案丰富的纸箱,则基于局部特征匹配的方法来得到纸箱的中心点图像坐标及旋转角度等信息,采用了结合对比度受限自适应直方图均衡化的“SURF特征检测+FLANN粗匹配+KNN精匹配”的局部特征匹配方法。实验结果表明,两种图像处理策略均能很好地识别出紧密排列的多个纸箱位姿。接着,根据所设计的视觉引导作业流程,利用C++编程语言在图形化开发平台QT上基于OpenCV完成了应用软件的开发,给出了图像采集模块、视觉标定模块、机器人通讯模块以及视觉引导模块的设计以及实现过程。最后,在所搭建的视觉引导智能分拣搬运系统平台上进行现场调试实验,验证了所设计的视觉引导分拣搬运作业解决方案的可行性和有效性。
其他文献
近年来,由不同降解方法产生的果胶片段基于对半乳糖凝集素-3(Gal-3)的特异性结合而产生多样的生物学功能,因而受到学术界和医药领域的广泛关注。越来越多的研究表明,鼠李半乳聚糖-I(RG-I)是果胶与Gal-3结合的主要活性片段;临床医学证实,Gal-3在许多转移性癌细胞亚群中呈高表达,因而是癌症治疗的新靶标。为此,本研究基于RG-I片段与癌细胞表面Gal-3特异性结合的原理,提出将RG-I作为一
随着计算机能力与人工智能的发展,社会对电力系统的智能化与自动化水平提出了更高的要求,希望在输电、变电、配电、基建等多种类型作业场景下实现对人员和设备等风险进行实时可视化和智能研判。例如在变电站日常监测工作中,积累了大量变电设备的红外图像以及工作人员的安全帽图像,工作人员需要在海量图像中确定变电设备的类别并确定其运行状态、判断其故障形式,判断多地多人的行为是否遵守安全规章制度。图像的成像质量、变电设
随着经济的发展和工业化进程的加快,我国面临着越来越突出的水安全问题,在水资源的污染防治中,对流域高效准确的水质预测,可清晰地反应流域的水质变化趋势,据此可及时调整水资源保护的各项措施,将水资源污染由事后治理转变为事前预防,有效改善水污染防治现状。近年来,随着越来越多的水质预测体系的建立,水质预测技术也日益完善,但面对复杂的水质变化特征,现有水质预测模型很难实现稳定准确的预测,迫切需要将不同模型进行
目的 探讨复合式小梁切除术治疗原发性开角型青光眼的临床效果。方法 选取2017年1月至2019年12月华中科技大学同济医学院附属协和医院收治的56例原发性开角型青光眼患者,根据手术方式的不同分为对照组(28例)和观察组(28例)。对照组采用常规小梁切除术进行治疗,观察组采用复合式小梁切除术进行治疗。比较两组患者的临床疗效、视力功能恢复情况、临床指标改善情况及并发症发生情况。结果 观察组的临床疗效、
低碳经济正成为当今世界经济社会发展的趋势,在低碳型城市交通体系建设中,新能源汽车因其低能耗、环保等优点逐步被推广为燃油汽车的替代品。在物联网技术的大力发展之下,面向新能源汽车的线上打车服务成为一种新趋势。线上订单的接收和处理通常由一个中心化的服务平台完成,以便于车辆资源的统一管理。这种中心化的调度模式为客户提供了高安全性和高效率,同时也给调度平台带来了沉重的计算负担,需要一种高效的全局调度方法以支
近年来,纳米发电机成为微纳米发电领域和传感器领域的研究热门。经过这些年的研究,研究人员已经能很好地制备基于刚性衬底的压电纳米发电机(PENG)和摩擦纳米发电机(TENG)。由于刚性基底和单一收集模式的局限,纳米发电机的研究在往柔性和提高性能输出的方向发展。本文通过真空抽滤和热压工艺,成功制备出一款柔性芳纶纤维基摩擦电纳米发电机(AF-TENG)。AF-TENG采用芳纶纤维(AF)和银纳米线(Ag
目前,我国对废旧垃圾塑料瓶回收仍以效率低的人工分拣方式为主,此方式工作环境恶劣对人体健康危害大,为此工业界积极开展了设计基于计算机视觉的垃圾瓶自动分拣设备的研究,但是现有设备存在识别精度和速度低的问题,无法满足企业的需求。鉴于此,本文以提高垃圾瓶颜色分类检测精度和速度为目的,分析了垃圾回收分类研究现状和问题,开展了基于深度学习的垃圾瓶颜色分类研究。通过对现有算法实验验证和分析,提出了通过压缩模型和
高光谱图像分类是遥感图像解译的热门研究课题之一,在众多军事和民用领域发挥着重要作用。高光谱图像的高维性、光谱变异性以及缺乏标签样本等特点,为其分类任务带来了极大挑战。本文基于大量参考文献,对高光谱图像的数据特性进行分析,总结了高光谱图像主流分类方法的研究思路;关注于深度网络的特征表示能力和过拟合问题,提出了两种基于混合卷积神经网络的高光谱图像分类方法。主要研究内容和创新如下:考虑到高光谱图像判别性
甘油磷酸二酯磷酸二酯酶(Glycerophosphodiester phosphodiesterase,GDPD;EC3.1.4.46)是生物体内普遍存在的催化甘油磷酸二酯水解生成3-磷酸甘油和相应含羟基化合物(如胆碱、肌醇和丝氨酸)的一类酶。我们研究团队前期发现来源于激烈热球菌(Pyrococcus furiosus DSM 3638)的GDPD(pfGDPD)具有溶血磷脂酶D水解活性,但其催化
本文基于过滤融合的数据预测方法是协同过滤算法和内容过滤算法的融合。本文基于过滤融合的数据预测方法利用用户历史行为信息、项目属性信息和用户自身特征信息预测用户的潜在未知行为倾向。本文研究的预测方法一定程度上解决了协同过滤算法的矩阵稀疏性问题和冷启动问题,同时也解决了内容过滤算法用户和项目交互信息不足的问题,从而在预测准确度上得到相应的提高并且在某些情况下会降低模型的复杂度。本文的主要工作如下:(1)