基于双目视觉的线缆机器手抓取目标检测定位方法与系统

来源 :南京航空航天大学 | 被引量 : 0次 | 上传用户:c707569552
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国工业智能机器人技术的发展,电力领域的带电作业机器人也在向全自主、智能化的方向发展,其中机器人的目标识别与定位技术是研究的重点。本文对高压输电线的识别与定位问题进行了研究,设计了一套基于双目视觉的高压输电线检测与定位系统用于引导机械手抓取目标输电线完成带电作业任务。首先,研究了一种基于彩色图像的高压输电线分割方法。结合不同色彩空间的特性,先根据输电线的颜色在HSV色彩空间下设定三个通道的阈值对背景进行过滤,然后使用形态学开运算对初步分割的结果进行迭代处理,提取到输电线的模板图像后在Lab色彩空间下对原始图像进行直方图反向投影,得到目标输电线的概率分布图像,最后对该概率分布图像进行二值化从而完成目标输电线的分割。然后针对输电线的分割结果中存在与背景有大量连通域的问题,提出了一种基于轮廓分析的融合目标特征的连通域去除方法。先对彩色图像的分割结果进行输电线主体轮廓的提取,并通过曲线拟合的方式去除毛刺、平滑边缘;然后利用轮廓曲线上点到切线相对距离的累加和作为拐点判别函数,设计出一种新的反映曲率特性的拐点检测算法;对检测出的输电线主体轮廓上的拐点进行类别判断,并筛选出输电线两边缘轮廓点集,最后根据边缘轮廓点集拟合提取出中心线从而完成背景连通域的去除。针对传统目标检测算法的局限性,本文对基于深度学习的YOLOv3算法进行了研究,对该算法从原理、网络结构和损失函数三个方面进行了剖析,通过制作输电线样本数据集并配置网络相关参数完成了算法模型的训练,结合本文的应用场景从数据集增强方法、损失函数以及后处理方法三个方面对该算法进行了优化,并将其成功应用于本文所设计的目标检测与定位系统中。最后本文对基于双目视觉的高压输电线检测与定位系统进行了设计。根据双目视觉测量原理对系统功能需求进行分析,设计出系统顶层架构,结合多线程并发技术实现了各个模块的功能,最后对设计出的双目视觉系统进行了测试,定位误差控制在5mm以内,能够达到每秒钟6帧以上的实时检测速度,并且测量过程中的数据波动稳定在3mm以内,进一步验证了本文所设计系统的准确性、实时性以及鲁棒性。
其他文献
随着科学技术的不断发展,无人机将在未来智能空战中发挥重要力量。航迹规划是无人机自主飞行的关键技术,航迹规划的结果会直接影响整个空战局势。因此,对无人机在各个阶段不同要求下的航迹规划进行研究具有重要意义。本文主要针对无人机的远距离和近距离航迹规划进行研究,通过构建远距离航迹规划模型和近距离敌方意图航迹预测模型和我方对抗航迹决策模型,开展了基于改进粒子群算法航迹规划和基于改进深度强化学习算法空战意图预
学位
跨摄像机多行人跟踪作为智能视频监控的重要研究任务之一,近些年来已经取得了很多重大的进展,并且已经在社会生活的各个方面得到了广泛的应用。跨摄像机多行人跟踪在发展过程中逐渐发展出两个重要的研究方向:第一个是对视频中行人的表观建模,怎样使获得的行人表观特征更具准确性和鲁棒性成为了一个难点;第二个是使用数据关联对来自不同摄像机的同一行人进行身份恢复,现有的数据关联方法还没有很好的解决跨摄像机多行人跟踪中误
学位
骨关节炎(OA)是一种威胁中老年人群公共健康和生活质量的重大医学疾病。OA的早期病变主要表现在软骨细胞外基质成分含量的变化,患者自身很难发现,且现有的临床方法和实验方法也不能较准确地识别。当患者出现比较明显的临床症状时,病情已处于OA的中后期且已造成软骨不可逆转的损伤。因此寻找一种用于OA早期诊断的新方法尤其重要。近年来,傅里叶变换近红外(FTNIR)光谱技术因为其分析速度快、成本低、易于穿透组织
学位
随着计算机技术和机器视觉的发展,视觉导航已逐渐成为最具发展潜力的导航方式之一,在没有全球卫星导航系统(GNSS)和高精度惯性导航系统的室内环境中,视觉导航凭借其灵活性和精确性发挥着重要的作用。本文以单目相机为主要传感器,将图像增强与语义分割技术加入单目视觉SLAM技术构建视觉鲁棒SLAM技术,提升复杂光照环境、弱纹理环境下的视觉导航的跟踪和位置估计性能,为鲁棒性强的视觉导航理论研究和工程化应用提供
学位
宫颈癌是女性常见癌症,严重威胁着女性的健康和生命,近年来在我国的发病情况呈现出年轻化的趋势。采用科学、有效的临床筛查,在早期发现宫颈病变并及时治疗,能够有效避免及减少宫颈癌的发生。针对确诊为宫颈癌的病人,以放疗为主的综合性治疗是最常用的治疗方法,而放疗疗效评估技术对于放疗过程中的剂量调整具有重要的指导意义。临床现有的宫颈癌筛查技术和放疗疗效评估技术存在成本高、设备复杂、技术要求高等局限性,本文通过
学位
羊肉是我国传统饮食文化中食药两用肉类食品,高蛋白、低脂肪、富含磷脂及维生素、矿物质,味美多汁,易于消化。我国是羊肉生产及消费大国,羊肉制品种类繁多。近年来,人们对优质羊肉产品的需求不断增大。羊肉及其制品的风味是影响消费者购买力和满意度的重要因素之一,羊肉特征风味物质研究与羊肉产业的发展紧密相关。该文对羊肉及其加工制品特征挥发性风味物质的构成、形成途径及其主要影响因素进行综述,以期为羊肉及其制品的进
期刊
在初中的众多科目中,英语极具特殊性,它兼具工具性与人文性。一直以来,由于语言环境等原因,学生在英语的学习上都需要付出较多努力,需要不断练习强化英语听、说、读、写能力。2021年,“双减”政策出台,其中最为重要的一点就是要求控制作业量,这就需要教师规划好课堂训练与课后作业,协调好课程安排,确保减少作业量的同时,也能够帮助学生复习和巩固。本文以“双减”背景下作业的优化与设计为研究对象,分析当前初中英语
期刊
近年来,光声成像作为一种新型的生物医学光学成像技术迅速发展。该成像技术基于光声效应,有效的结合了光学成像和声学成像的优点,具有成像分辨率高、成像深度深、无侵入无标记等特点。本文设计并开发了一套基于光纤的双模态光声成像系统,应用光纤中的受激拉曼散射效应,将单波长脉冲激光源变换至超高速切换的双波长脉冲激光源,在该光源下实现在体小鼠血管组织的结构成像和功能成像。论文主要工作如下:1.设计系统技术方案,搭
学位
"双减"政策目前缓解了学生的选课压力,促进了传统课程的变革。在以往的英语课堂教学中,教师可以给学生布置复杂的作业,从而帮助学生加强英语水平。以往,许多教师将体育锻炼作为提高学生成绩的重要措施,不能满足学生的学习需要。教师应结合现行的"双减"政策,涉及英语作业,以满足不同学生的需求,进一步提高学生的成绩。
会议
我国是一个铁路大国,由于钢轨在列车车轮碾压、温度应力等外部载荷的长期作用下会出现表面塑性形变、应力集中和裂纹等损伤,严重时会导致列车出现脱轨等危险事故,因此,我国对钢轨表面损伤的监测和检测提出了很高的要求。本文基于钢铁材料中普遍存在的剩磁效应,研究了基于剩磁效应的钢轨表面损伤的巡检技术。主要进行了以下工作:1)基于磁偶极子理论研究了应力集中漏磁场模型和裂纹缺陷的漏磁场模型,分析了利用剩磁效应在钢轨
学位