【摘 要】
:
随着制造业的智能化转型升级,人机协作受到了更广泛的应用并正在成为未来生产的主流方式,其中视觉机械臂抓取作业占据了不少的份额。快速、准确识别目标物体位姿,安全、高效躲避人体这一动态障碍物是完成人机协作场景抓取作业的关键,其中,兼顾计算效率与准确性的物体识别、机械臂中间关节避障是关键方向。针对上述关键问题,本文以建立准确、时敏的目标物体位姿估计方法和高效、安全的动态避障策略为导向,一方面,基于深度相机
论文部分内容阅读
随着制造业的智能化转型升级,人机协作受到了更广泛的应用并正在成为未来生产的主流方式,其中视觉机械臂抓取作业占据了不少的份额。快速、准确识别目标物体位姿,安全、高效躲避人体这一动态障碍物是完成人机协作场景抓取作业的关键,其中,兼顾计算效率与准确性的物体识别、机械臂中间关节避障是关键方向。针对上述关键问题,本文以建立准确、时敏的目标物体位姿估计方法和高效、安全的动态避障策略为导向,一方面,基于深度相机的标定,在YOLOv5目标检测算法的基础上调整网络结构,直接检测目标物体三维边界盒顶点的二维投影,实现物体位姿实时、准确估计,另一方面,基于机械臂运动学模型正逆解的解算,在基于深度空间距离的避障方法的基础上添加势场约束,并且综合考虑机械臂中间关节轨迹,形成机械臂本体动态避障策略,实现机械臂安全、高效避障,从而保障机械臂在人机协作场景下完成目标物体的成功抓取,主要研究内容如下:首先,采用D-H参数法建立机械臂运动学模型并进行正逆运动学分析,之后采用张正友标定法进行了相机标定,在此基础上进行“眼在手外”手眼标定,由此明确物体、传感器、机械臂之间的相对位置关系和机械臂各连杆间的关系,为后续研究奠定基础;其次,针对物体位姿估计实时性受限问题,在前人提出的基于YOLO(You Only Look Once)的位姿估计框架基础上,创新地引入目标检测算法YOLOv5,增加了卷积组件、残差组件、CSP(Cross Stage Partial)结构、空间金字塔池化结构五个重要的基础组件,详细设计了网络的输入端、主干网络、中间结构、输出层,改进实时性与准确性。此外,为了训练网络达到预期效果,本文创新性地借助动作捕捉摄像头和图像采集深度摄像头建立了用于网络训练和测试的数据集,对网络进行了训练。实验表明,基于YOLOv5的位姿估计方法,相比于Bb8、基于YOLO的位姿估计方法,实时性显著提升,准确性可以满足实际应用的需要。然后,针对动态避障策略效率不高、机械臂非末端执行器部分碰撞问题,一方面,基于深度空间距离的方法,利用导纳控制原理,建立力指令规划与深度空间距离的映射关系,并结合人工势场法,在控制率中添加势场约束,以其提升避障快速性,另一方面,基于机械臂运动学相关知识实时解算中间关节位姿,形成机械臂本体动态避障策略,进而综合位姿估计,形成机械臂动态高效避障方案。实验表明,基于导纳控制的避障策略,可以有效避开动态障碍物实现目标物体抓取,相比于现有的方法,安全性更高。最后,使用英特尔REALSENSE深度摄像头D435i、电力驱动二指刚性夹爪、桌面级6轴机械臂GLUON-2L6-4L3搭建实验平台,设置三组实验验证上述基于YOLOv5的位姿估计方法、基于导纳控制的避障策略。结果表明,采用本文提出的基于YOLOv5的位姿估计方法和基于导纳控制的避障策略,可以实现人体障碍的有效躲避和目标物体的成功抓取。
其他文献
在许多工作场合,DC/DC变换器不可或缺,在航空电源、电力系统、电动汽车等领域更是应用广泛。本文将对利用数字控制的高降压比移相全桥倍流同步整流DC/DC变换器进行研究,分析其工作原理,建立小信号模型并加以补偿,优化变换器的动态响应速度等技术指标,与此同时使用同步整流技术,以减小变换器的功率损耗。本文首先针对本变换器的拓扑结构,对副边倍流同步整流拓扑和变换器整体拓扑的工作情况分别进行分析,并结合拓扑
颗粒状农作物在储存和运输过程中容易出现表皮破损的现象,需要进行筛选和分类。利用卷积神经网络可以实现颗粒状农作物的特征提取和分类,受实际应用场景限制,对颗粒状农作物的筛选多在嵌入式平台中进行。本文选取花生作为典型颗粒状农作物,设计简化的卷积神经网络,并对网络模型通道剪枝,利用PYNQ平台的优势进行软硬件协同设计,实现颗粒状农作物分类简化网络在嵌入式平台的部署和硬件加速。首先,设计颗粒状农作物分类系统
在健康医疗领域,越来越多的电子健康记录(Electronic Health Record,EHR)从不同层次的医疗机构和非医疗机构集成产生出来,为医疗健康数据共享提出了巨大挑战。包括,共享仅局限在单一医院内部,无法实现跨机构共享;依靠第三方数据库维护用于共享的医疗健康数据容易造成单点故障及数据泄露;现有的健康信息共享平台多数没有关注电子健康信息的所有权以及使用权问题;目前的共享平台并没有解决共享数
目的:软骨肉瘤作为发病率排名第二的原发恶性骨肿瘤,它在成年男性中比较多见。到目前为止该肿瘤的诊断及治疗都依然是困扰着全世界研究人员和临床工作者的难题。放射疗法和化学治疗对大部分的软骨肉瘤都很难起到效果,外科手段仍是目前为止最有效的治疗方法。然而常常存在患者无法进行手术的情况,同时手术治疗也会造成残疾或肢体功能障碍,因此对于软骨肉瘤的发生发展,我们需要有更多的认识和了解。E-钙黏蛋白是跨膜糖蛋白钙黏
背景:肾移植是治疗终末期肾病最有效的方法,目前供者器官数量远远小于受者的需求,移植器官短缺问题日趋严重,为了解决这一问题,我国鼓励公民进行逝世后器官捐献,当前公民逝世捐献(donation after citizen death,DCD)已经成为目前肾脏的主要来源,然而此类供者在捐献前往往经历了重大创伤、感染及心肺复苏等,导致供者来源性感染(donor-derived infection,DDI)
目的通过对不同严重程度的退行性颈椎病研究,分析颈脊髓皮质脊髓侧束和薄楔束的退变情况,以及大脑结构的变化情况。方法将24例退行性颈椎病患者的颈脊髓在常规磁共振T2像上按受压节段的信号表现分为高信号组和非高信号组,并与10例健康对照组比较皮质脊髓侧束和薄楔束在受压节段以上(C1/2-C4/5)不同水平的FA和ADC比值,以发现在位于侧柱的皮质脊髓侧束和后柱的薄楔束是否会在FA和ADC值上发生变化,以及
目的:本研究主要是探索口服西地那非联合阴茎海绵体注射前列地尔辅助下的阴茎多普勒超声(PDU)检查在血管性勃起功能障碍(ED)诊断中的应用。PDU检查是诊断血管性ED的“金标准”,但是,PDU检查时因疼痛、恐惧等情绪使得患者交感神经过度兴奋,抑制患者阴茎达到最佳勃起状态,而PDU检查的准确性受到阴茎勃起硬度影响较大。我们提出在进行检查时,口服西地那非同时联合阴茎海绵体注射前列地尔诱导阴茎勃起,以提高
随着新能源汽车行业的快速发展,人们对汽车的轻量化设计和整车安全性提出了更高的要求。高强钢热成形技术越来越多的被应用于汽车零件的加工成形领域,对于重要的安全结构件,需要在考虑高强度的同时兼顾一定的塑性来承担碰撞吸能的作用。由此,高强钢热成形变强度工艺的研究得到了越来越多研究人员的关注,零件的不同部分具有不同的力学性能,可以最大程度地提高零件整体的抗冲击能力。本文在分析国内外变强度工艺相关研究的基础上
烧结多孔金属材料由于兼备金属和多孔材料的优势广泛应用于航空航天、光电材料以及生物医学等各领域。由于孔隙的存在,应用传统的切削加工方式难以进行加工,切削力会使材料产生塑性变形,破坏加工表面的孔隙结构。电火花加工其非接触式加工的特点不会对材料表面造成塑性变形,然而放电加工产生的熔化重铸层,也会对较小的孔隙造成封堵。此外由于多孔材料孔隙不均匀分布使得深小孔加工的间隙流场分布不均,造成排屑困难,容易产生二
目的:主动脉瓣二叶畸形是心脏大血管外科常见的先天性瓣膜疾病,此类患者常合并一系列主动脉疾病。主动脉夹层作为一种起病急骤,病死率极高的疾病,也是主动脉瓣二叶畸形的众多并发症之一,它严重威胁了患者的生命健康,极大的影响了患者的治疗与预后情况。因此,对此类疾病的早期诊断显得极为重要,迫切需要特异性的生物标志物协助疾病的诊断。本文通过蛋白组学技术手段,对合并急性主动脉夹层的主动脉瓣二叶畸形患者体内差异蛋白