基于深度学习的猕猴桃自动授粉系统的设计与实现

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:lily1988122
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
及时、高效、细致地对猕猴桃花授粉是促使优质猕猴桃生长的关键。近几年人工授粉被大量应用到猕猴桃果树上,以用来减少对蜜蜂授粉的依赖。但由于猕猴桃花期较短,需要人工在短时间内完成果园内所有猕猴桃花的授粉工作,这需要大量的时间、金钱和人力。随着猕猴桃果园种植面积的不断扩大,以及农村劳动力不足、人口老龄化等问题的出现,亟需进行猕猴桃自动授粉系统的研究,利用科技发展提高授粉效率,推动田间授粉操作的高效化、自动化、智能化。针对上述问题,本文提出了一种基于深度学习的猕猴桃自动授粉系统的设计与实现方案,并最终部署到英伟达公司推出的人工智能开发板上。该系统首先通过深度摄像头采集猕猴桃花的彩色流以及深度流信息,然后将彩色流信息送入目标检测网络模型中进行推理识别,同时结合深度流信息对识别出的猕猴桃花的二维坐标进行转化,获取其在三维空间下的位置坐标,最终将空间三维坐标传送给机械臂控制系统,控制系统将控制机械臂对猕猴桃花进行授粉。基于上述功能需求,本文的主要工作内容如下:(1)目标检测算法的选取。首先通过对猕猴桃花数据的采集、标注建立了猕猴桃花数据集,由于在猕猴桃开花期间每天都要进行授粉,这样就要求区分未授粉和授过粉的花朵,于是本文将猕猴桃花分为四个类别:flower1(完全开放且未授粉的花朵)、flower2(半开放且未授粉的花朵)、flower3(完全未开放的花骨朵)、flower4(已经授过粉的花朵)。接着研究了Faster R-CNN、SSD和YOLO三种当前主流的目标检测算法,并在猕猴桃花数据集上进行实验,最终根据实验结果综合考虑检测算法的准确率以及速度选择YOLOv5目标检测算法作为后续研究的基础。(2)基于YOLOv5的改进算法YOLOv5_IMP目标检测算法。首先对YOLO系列目标检测算法YOLOv3、YOLOv4以及YOLOv5进行进一步研究,虽然YOLOv5算法在准确率和速度上都有不错的表现,但其仍有不足之处:其一,在特征提取时只关注了局部信息,并没有考虑全局以及上下文信息;其二,在特征融合时,只考虑了两个节点进行特征融合,并未考虑三个甚至多个节点进行更高级别的特征融合;其三,并未侧重于对猕猴桃花这种中、小目标物体的检测。基于上述问题,本文在YOLOv5算法的基础上对网络架构的各个方面进行了改进优化,包括在主干特征提取网络方面,使用C3TR模块替代原有的C3模块以及加入了CBAM注意力机制模块,以获取全局以及上下文信息;在加强特征提取网络方面,使用Bi FPN网络结构代替YOLOv5中的PANet网络结构,以获得更深层次的特征融合;在YOLO Head输出端方面,通过增加了一个YOLO Head中小目标物体检测头,加强了对于中、小目标的检测。最终本文提出了YOLOv5_IMP目标检测算法,实验结果表明,YOLOv5_IMP算法在猕猴桃花四个类别的m AP值为85%,尤其是最为关注的flower1类别的AP值达到了92.8%。(3)猕猴桃自动授粉系统的设计与实现。猕猴桃自动授粉系统主要包括三个模块:检测模块、定位模块以及控制模块。检测模块主要是将提出的YOLOv5_IMP目标检测算法通过Tensor RT高性能C++推理库部署到NVIDIA推出的Jetson Nano人工智能开发板上并对目标对象进行推理识别,实验结果表明,平均每张图片的检测时间为189ms;定位模块主要是通过Intel Real Sense D435i深度摄像头采集深度流和彩色流信息,然后使用相机的librealsense C++库将得到的二维像素坐标最终转化为以机械臂为参考系的空间三维坐标,通过实验验证,相机定位距离60cm的猕猴桃花时,X轴平均误差为5.5mm,Y轴平均误差为5.6mm,Z轴平均误差为6.6mm;控制模块包括三个部分,与小车进行通信,控制小车每次移动固定的距离,与深度摄像头进行通信,控制摄像头采集同一时刻的彩色图片和深度图片,与机械臂进行通信,将空间三维坐标传送给机械臂控制系统,机械臂控制系统将会控制机械臂到达指定的位置并对目标花朵进行授粉操作。本文最终实现了一种基于深度学习的猕猴桃自动授粉系统,该系统具有检测准确率高、授粉速度快、成本低的优点。经测试,猕猴桃花的检测成功率为92.8%,授粉速度为2.91s/朵。该系统能够实现对猕猴桃花的自动授粉,对推动我国猕猴桃授粉产业向高效化、自动化、智能化发展有重大的研究意义。
其他文献
多源遥感图像配准是图像处理领域的关键技术,其主要作用是对同一地物表现,利用非同时、非同一成像传感器或者非同一视角进行拍摄所得到的两幅或两幅以上的图像数据进行实际空间地理位置上的对齐。而随着现代科技的发展,多源遥感图像数据获取的途径也随之增多。多源遥感图像的精确配准不仅能够将图像的优势信息相结合,也为图像融合、目标识别检测等图像处理奠定了一定的基础,因此研究多源图像配准技术具有重要的研究意义。论文通
学位
频率稳定度高的激光在光频准、精密光谱和引力波探测等精密测量领域有着重要的应用。由于激光频率的稳定性直接影响着精密测量的精度,因此对激光稳频技术的研究具有重要的意义。饱和吸收稳频方法以高稳定的原子或者分子跃迁谱线为参考频率,具有成本低、频率稳定度高和复现性好的特点。本文在传统饱和吸收谱稳频的基础上通过数字电路对其反馈环节进行优化,设计了一款低成本小型化的激光稳频系统。与传统饱和吸收稳频系统相比,该系
学位
自然语言信息是人类社会基础的交流载体,大量的信息交流以文字作为传播媒介,进入信息时代后,在海量的文本信息基础上衍生出了多样的自然语言处理任务,深度学习在处理自然语言任务上表现出优异的性能。近几年来出现的预训练语言模型更是自然语言处理研究方向上一个里程碑式的研究进展,但是随之而来也有很多问题,网络模型臃肿,过参数化特性,都极大地限制了语言模型实际的应用落地,也提高了学术研究的门槛,因此在预训练语言模
学位
薄壁件具有强度高、结构紧凑、质量轻、耐腐蚀性强等优点,在电子信息、国防军工、航空航天、汽车制造等领域应用广泛。薄壁件在铣削加工过程中材料去除率高,刀具受切削力影响易发生让刀现象,同时工件刚度低,容易变形,最终导致加工精度降低,因此精确预测实际铣削加工变形是精密机械加工领域亟待解决的工艺难题。本文设计铣削加工实验,采集多源信息,在此基础上提出融合几何特征的变工况切削力预测方法,构建刀具静态变形动力学
学位
电源管理芯片将电源电压转换为不受外部干扰的稳定电压/电流,为设备中其它模块供电。随着电子设备小型化和高效化的发展趋势,电源管理芯片作为电子设备的核心组成部分,对其设计需求也日益复杂。目前开关电源芯片的研发生产主要来自于美国德州仪器TI(Texas Instruments)和芯源系统MPS(Monolithic Power Systems),国内厂商虽有生产但性能与世界一流水平相比仍有一定差距。研究
学位
<正>随着人们对白酒消费日趋理性,对于健康饮酒的需求也越来越明显。《中国白酒消费趋势白皮书》调研结果显示,消费者购买白酒时,更加青睐"口味纯净、口感好"和"健康养生"的白酒产品。健康正成为人们生活水平提高后最为关注的,在此背景下,茅台不老红曲酒应势而出。茅台不老红曲酒是由贵州茅台酒厂(集团)保健
期刊
近年来,随着无人机技术的逐渐成熟,制造成本的不断降低,无人机在空中侦察、消防救援、交通管理等领域得到了广泛的应用。由于无人机系统集成度和结构复杂度都很高,并且大多是在恶劣的环境以及地形下执行任务,可能会出现各种类型的故障。为了保证无人机任务的顺利执行以及避免相关故障的重复出现,需要完善和加强无人机故障检测的相关研究。无人机日志数据具有非常重要的研究价值,记录了飞行过程中传感器的重要信息,包括各种飞
学位
随着遥感对地观测技术的飞速发展,光学遥感数据逐渐扮演着越来越重要的角色,被广泛应用于海洋目标监测、城市信息监控、自然灾害响应和军事安全等领域。光学遥感图像、视频数据除了拥有丰富的空间信息,在时间维度上也有着较多的动态信息,有助于持续获取感兴趣目标的有效信息。在光学遥感数据处理分析的研究中,目标检测是进一步深入挖掘遥感信息的基础,将目标检测应用与遥感数据相结合具有重要的现实意义。本论文主要研究融合时
学位
火灾是最常见的严重影响社会发展与人身安全的灾害之一,因此,在火灾发生初期进行及时、准确的检测具有极大的现实意义。传统火灾检测技术有着检测范围小,响应速度慢等弊端。随着数字图像技术的发展,基于视频图像的火灾检测技术取得了较大进展。当前的图像型火灾检测系统大多采用单波段传感器,使用可见光传感器与红外传感器中的一种进行数据采集。但在有干扰物遮挡的情况下可见光火灾检测并不能取得良好的效果,易出现漏检情况。
学位
近些年来,人工智能的各种计算模型尤其是卷积神经网络得到了快速发展,广泛应用于各种领域中。然而,卷积神经网络训练的过程是基于数理统计的,在理论上具有较大的不确定性,在实际应用中也表现出了一些安全性问题。形式化验证是一种用形式化方法来确定系统是否满足特定性质规约的技术。由于形式化方法是基于数理逻辑的,具有可靠性,所以用形式化验证技术来研究卷积神经网络,将有助于保障卷积神经网络的安全性和提高卷积神经网络
学位