基于轻量级神经网络和双目视觉的柑橘果实识别与定位方法

来源 :华南农业大学 | 被引量 : 2次 | 上传用户:suny112233
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
柑橘是世界第一大类水果,是世界第三大贸易农产品,是我国水果产业的重要支撑。传统的柑橘果园采摘主要依靠人工作业,劳动强度大、劳动成本高。因此,研究采摘机器人是解放农村劳动力的重要发展方向。在采摘机器人领域,柑橘果实识别是实现果树精细化管理以及实现果园产量精准预测的关键技术环节,柑橘果实定位是实现机械手自动采摘的必要前提,果实识别与定位的准确率直接决定了机械手的采摘成功率。为实现水果采摘机器人对果实快速精准识别与定位,本文以柑橘为研究对象,研究基于轻量级神经网络和双目视觉的目标识别与定位方法,主要研究工作以及结论如下:(1)对目标检测领域常见算法进行阐述,为实现自然环境下柑橘果实的快速精准识别,提出基于改进YOLOv3-LITE轻量级神经网络的柑橘果实识别方法。该方法通过引入GIoU边框回归损失函数来提高果实识别回归框准确率;为便于迁移到移动终端,提出YOLOv3-LITE轻量级网络模型,使用MobileNet-v2作为模型的骨干网络,并使用混合训练与迁移学习结合的预训练方式来提高模型的泛化能力。(2)为实现柑橘果实的三维空间定位,提出基于双目立体视觉的柑橘果实空间定位方法。该方法通过对双目摄像机进行标定获得左右目相机的内参、外参以及关系系数矩阵,通过立体校正和添加水平方向极线约束来提高匹配精度;利用OpenCV计算机视觉库中SGBM立体匹配方法提取特征,对左右目图像对应像素特征点进行匹配,通过三角测量法对视差图中柑橘果实的中心点计算三维数据。(3)分别对柑橘果实识别方法与定位方法进行实验验证。在柑橘果实识别实验中,通过与Faster R-CNN以及SSD模型对比在不同遮挡程度的测试样本下模型的识别效果,用F1值与AP值评估各模型的差异,实验结果表明YOLOv3-LITE轻量级网络模型识别效果提升显著。其F1值和AP值分别为93.69%和91.13%,Average IoU为87.32%;在GPU上对柑橘目标检测速度可达246帧/s,对单张416*416的图片推断速度为16.9 ms,模型占用内存为28 MB。利用双目立体视觉技术对柑橘果实中心点进行三维定位实验,通过对比高精度激光测距仪,本文采用三维空间定位方法对于X坐标的误差范围为-5.3~4.6 mm;对于Y坐标的误差范围为-4.9~4.5 mm;对于Z坐标的误差范围为-7.1~11.2 mm,定位精度满足采摘机器人的三维定位误差要求。
其他文献
基于通用3D(Three-Dimension)建模系统的传统手工建模方法存在学习周期长、建模效率低和模型质量依赖人工经验等不足。在上述背景下,鞋企对专用鞋类3D建模系统的需求越来越大。本文在鞋类产品开发流程分析的基础上研发基于2D(Two-Dimension)设计稿的3D建模系统,旨在为鞋跟的自动化建模提供一种快速有效的解决方案。作为鞋类产品的重要部件,鞋跟是产品外观和穿着舒适度的重要影响因数之一
学位
目的:调查分析某三甲中医院口腔科中成药应用现状。方法:从医院信息管理系统中提取2020年口腔科中成药用药处方600张,调查中成药应用现状。结果:疾病构成主要为牙周炎、牙髓炎、口腔溃疡、智齿冠周炎和牙龈肿痛。剂型为颗粒剂、胶囊、口服液、喷雾剂和散剂。DDDs排序在前6位的中成药有康复新液、口炎清颗粒、黄连上清胶囊、外用溃疡散、口腔炎喷雾剂、银黄颗粒,均为低价中成药。结论:医院口腔科中成药以消炎抗菌、
期刊
随着商品市场竞争的加剧,目前商品市场上用来防伪标识的条形码、二维码还是存在着很多局限的地方。条形码的存储信息方式目前只有水平方向存储,垂直方向不存储,高度通常是为了便于扫描设备的对准;保密性较低,损污后的可读性差。鉴于以上条形码和二维码的局限性,本文提出一种新的防伪标识码—分形码。本文设计的分形码结构是基于一种根式函数曲线表达式生成的结构,这种分形码的形状是个正立的三层满四叉树结构。这种分形码的结
学位
大数据时代已然来临,价格预测已成大势所趋。2019年下半年生猪市场受到非洲猪瘟的影响,价格波动剧烈。生猪价格预测已经成为了许多学者研究的热点。生猪价格的预测,不仅具有一定的学术意义,而且对于生猪养殖企业的战略布局和生产调控有很大的应用价值。企业根据预测结果对生猪产能进调控后,不仅能扩大收益减小损失,而且生猪市场的生猪价格会随着生猪的供应量稳定逐渐平稳。本文通过研究温氏集团历史生猪价格的涨跌规律,建
学位
随着税务种类的增多,各种税务的办理前提和办理对象互有区别,并且有部分税务可以线上办理,给纳税人更加便捷的纳税体验。但是,有着大量的业务要求纳税人去线下进行办理,办税服务厅的纳税人数依然较多。纳税人不能知道自己将要等待的时间长度,并且在高峰时间段的等待时间过长,增加了纳税人的焦虑,以及浪费了大量的等待时间。因此,明确纳税人等待时间,能有效地减少纳税人等待过程中的焦虑,并能让纳税人根据需要等待时间的长
学位
进化算法自上世纪末以来就被研究者发现非常适用于求解多目标优化问题,而且随着时代的发展优化问题所需考虑的目标维度也越来越多,因此处理高维的多目标优化问题的算法已成为热门的研究领域。NSGA-III作为一个高维多目标进化算法,结合了非支配排序策略和分解目标空间的思想,利用结构化参考点来引导种群的进化,在高维空间中取得了不错的表现。但算法依然存在一些不足,本文围绕如何改善NSGA-III在高维空间中收敛
学位
我国荔枝产量丰富,发展荔枝采摘机器人,实现荔枝采摘的自动化,能提升采摘效率,降低劳动力成本。由于与柑橘、苹果等不同,自然环境下的荔枝果实较软、果实小而皮脆,使用吸附等方式来进行采摘会损伤果实。因此,使用夹持式的采摘机器人,更适于采摘荔枝。夹持式采摘机器人在作业时,需要检测识别出荔枝枝条果实及其枝条,定位出枝条上的采摘点,从而实现对荔枝的采摘。为此,本文针对荔枝在野外环境下的果实检测和采摘点的定位进
学位
我国动物源细菌耐药现象日益严重,给公共卫生和食品安全造成了重大威胁。实现耐药性控制的前提条件是及时、准确地进行细菌的耐药性监测。目前我国耐药监测的主要手段是使用药敏板对细菌进行药敏实验,但由于我国基层的设备条件有限以及从业人员专业能力有限,基层药敏实验结果判读主要依赖人工或昂贵设备,导致兽医临床耐药性检测缓慢。近年来卷积神经网络等深度学习技术在图像处理领域得到了快速的发展,在医疗、交通等各种领域应
学位
人体姿态估计一直以来都是计算机视觉领域的一个热点话题。其主要内容是让计算机从图像或视频中定位出人物的关节点(如肘、手腕等)。在图像中推断出多人的姿势,是一种独特的挑战。人体姿态估计主要运用于动作识别、人机交互、智能安防、增强现实等领域。人体姿态估计主要存在的问题包括:(1)图像可能包含不明数量的人,这些人可能出现在任何位置;(2)由于接触或肢体重合,人与人之间的相互接触或者肢体重合会导致复杂的空间
学位
目的:探讨中药干预在口腔科疾病患者管理中的应用效果及价值,以促进中药的持续改进,促进口腔科疾病患者的管理。方法:随机选取2020年7月—2021年7月在医院口腔科接受过治疗的100例口腔溃疡疾病患者为研究对象,随机均分为对照组与观察组各50例。对照组采取常规的口腔科疾病管理模式进行治疗,观察组在常规的口腔溃疡疾病管理模式的基础上施加中药干预,比较两组患者的管理效果。结果:观察组患者的康复率,显著高
期刊