基于视觉的仓储托盘检测与移动机器人自适应位姿镇定

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:yusijin11
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网经济的发展,推动着传统物流模式不断变革升级。同时,人口老龄化加剧以及新冠疫情在全球范围内的爆发与持续蔓延,使得高度自动化的智慧物流成为迫切需求。以托盘叉车AGV为代表自主移动机器人在物流业的应用越来越广泛,高重复性和高强度的任务逐步被机器人完成。物流仓储环境复杂多变,由于托盘叉车AGV缺乏对装载目标的自动识别与局部定位能力,智慧物流搬运环节在很大程度上还无法实现完全自动化。本文以托盘叉车AGV为实验平台,研究基于视觉的仓储托盘检测与位姿估计算法,并在此基础上设计托盘叉车AGV自适应位姿镇定算法,在避免叉取动作时损坏货物和保证实时性的前提下,实现托盘叉车全自动搬运。主要研究内容如下:(1)基于二维码标签的仓储托盘检测与位姿估计。首先通过阈值处理、直线检测、四边形拟合、解码等方法检测出敷设在托盘中心的二维码标签。然后基于Pn P方法解算标签中心的位姿,实现对托盘的位姿估计。该方案具有较高的检测鲁棒性和位姿估计准确性,但检测速度慢。针对这一问题,提出了采用CSRT目标跟踪算法在原始图像中分割ROI区域的算法加速策略。实验证明改进后的算法有效降低CPU利用率,算法性能显著提升。(2)基于RGB-D信息的仓储托盘检测与位姿估计。针对基于二维码标签的仓储托盘检测方法在具有海量托盘应用场景下的局限性,提出了一种基于托盘原始特征的感知与定位方法。首先将RGB图像输入YOLOv5目标检测模型进行推理检测,输出仓储托盘预测框。接着将预测框映射到对齐处理后的深度图像上,利用传统图像算法在深度图中分割出托盘平面两侧孔位。然后根据托盘孔位确定中心与两侧立柱位置,实现精准定位。最后结合RGB相机内参和深度信息计算托盘位姿。实验证明该算法在不借助任何辅助标志物且检测距离更远的前提下,能够保证检测鲁棒性与位姿估计准确性,满足实际应用要求。(3)移动机器人自适应位姿镇定。在利用上述方法得到仓储托盘位姿信息的基础之上,结合托盘叉车AGV的全局位姿计算并更新托盘状态。围绕物流仓储环境下托盘叉车AGV自动装载问题,首先研究局部路径规划算法,制定最优取货路径并使用贝塞尔曲线平滑处理。然后提出用于路径跟踪的核心导航控制算法。最后设计对照实验证明该方案显著提高了托盘自动装载成功率,在保证自动搬运安全可靠的前提下,有效提升搬运效率。
其他文献
煤炭在能源领域充当着重要的角色,我国每年煤炭消费巨大,煤炭的高效利用对我国的社会经济发展和改善民生有重要价值。现阶段火电厂主要以燃烧煤粉作为发电方式,优化制粉系统变得至关重要。然而制粉系统内部运行状态难以做准确地实时监测,利用火力发电厂制粉系统的可操作参数和煤质参数来建立制粉系统煤粉细度和磨煤机电流大小的预测模型就成为了一种可行的方法。本文以HP983型磨煤机作为研究对象,在河南平顶山某电厂的#5
电子战(EW)也称为电子对抗,是敌对双方争夺战场电磁频谱的斗争,电子对抗技术是当代信息化战场上十分关键的作战力量之一。其中,电子侦察中的检测与估计技术是电子战成功实施电子攻击和防护的首要任务和先决条件。然而,随着军事电子信息技术的快速发展,战场电磁频谱呈现动态、多变、密集、复杂等特征,给传统的检测与估计方法带来了前所未有的挑战。与此同时,深度学习技术快速发展,其相关技术在电子对抗中的应用也成为了当
无论是在家庭还是学校,每天都发生着许许多多的小事,一个眼神、一句话语、一个手势等都可能对孩子产生莫大的影响。教育现象学就是一门探讨成年人与孩子如何相处的学问,回答“对于这个孩子,此时此刻我该怎么做才是最好的”。然而,所谓此时此刻的正确反应往往不是周密思考的结果,而是取决于教师感知学生的敏感性。教育不是教知识,
期刊
路径寻优是一种较为经典的优化问题,其主要内容是通过智能优化算法合理规划出一条从起始地到目标地的最优路径。群智能优化算法(Swarm Intelligence,SI)是一种新兴的元启发式技术,具有原理简单、易实现等特点。近年来,出现了许多新颖的SI算法,例如哈里斯鹰优化算法(Harris Hawks Optimization,HHO)。HHO算法是受哈里斯鹰捕食行为启发而提出的一种新的SI算法,具有
由于信号中的信息存在一定的冗余,假使根据奈奎斯特采样率对信号进行采样,会造成带宽不可避免的“浪费”,同时还可能增加信号采集、处理方面的设备成本。而假设信号存在一定稀疏性的情况下,根据压缩感知理论,信号可以先经过一定的测量过程而实现压缩。测量过程中,信号的采样率可以远低于其奈奎斯特采样率。因此可以说压缩感知一定程度上“突破”了奈奎斯特采样定律对模数转换的限制,针对通信领域中载波频率不断提高的现状,压
大规模多输入多输出(Massive Multiple-Input Multiple-Output,Massive MIMO)自问世以来,以其分集增益和空间增益特性,被广泛应用在网络需求大的场景中。随着技术的变革,通信设备数目快速增长,基站集成的天线数量也随之增加,这就导致了整个系统的功耗巨大。因此,如何降低系统功耗,发展绿色通信已经成为当今研究的热点。在此背景下,本文针对大规模MIMO系统的能效优
逆向调制(MRR)自由空间光通信(FSO)系统是一种基于逆向反射器的非对称FSO系统,既避免了传统无线射频通信系统面临的频谱资源紧张、传输速率及安全保密性不够高的问题,又能克服传统FSO系统终端功耗大、体积大的缺点。然而,MRR FSO通信需要在大气信道中进行往返两次传输,会受到两倍大气湍流的影响,带来更加严重的光束漂移及光强闪烁等光学畸变现象,从而降低系统的稳定性和可靠性。因此,为了进一步提高M
基于世卫组织给予的数据中,每年交通事故发生的次数不尽其数。其中,疲劳驾驶是其中一大致命因素。在2005年的中国交通事故统计报告提到的47起事故中,因疲劳驾驶导致7起。疲劳驾驶不仅是在伤害自己同时也在伤害他人。为了尽可能地避免疲劳驾驶的事故发生,疲劳驾驶状态检测极其重要。对此,研究疲劳驾驶状态检测具有深刻意义与举足轻重的价值。为了在驾驶过程中能够有效地进行实时检测,本文基于MobileNet-V3轻
为了进一步提升电机驱动系统的功率密度与效率,降低系统的体积与成本,电机与驱动电路的集成化技术逐渐成为研究人员的关注热点。磁功能集成电机驱动的概念指电机与驱动电路共享磁性元件实现各自运行所需的不同功能,从而为系统减少磁性元件的数量。然而磁功能集成电机驱动方案中电机和驱动电路同时包含功率耦合和磁耦合,无法用传统思路独立设计。确定电机励磁绕组参数是解决这一问题的关键。针对此问题,本文提出一种将驱动电路设
随着互联网技术的发展、应用的快速普及,不受时空限制的线上教学风起云涌,特别是受新冠疫情的影响,人们对于无接触式的线上教学的需求变得更加迫切。线上教学打破了时间空间限制,使人们的学习更加自由便捷。但相比于传统课堂,在线课堂环境下师生互动性差,沟通存在一定障碍,教师很难有效监测到学生的学习专注度,学生也可能会因为没有监督而学习效率下降。基于此,本文结合网络线上教学环境的特点,提出了一种视觉特征融合的注