基于嵌入式平台的百香果识别和定位技术研究

来源 :福建农林大学 | 被引量 : 0次 | 上传用户:lanzhengpeng2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着乡村振兴政策的不断深入推进,我国在农业作物上的产量逐年攀升,尤其是水果产量方面,然而当前我国大多数的水果供应链其采摘环节仍主要依靠人工,不仅效率低下,且随着人力成本的不断升高,势必会阻碍水果产业的进一步扩大发展,无法满足市场的供求。为了克服以上限制,当下使用水果采摘机器人代替人工采摘逐渐成为研究的热点,且今后必将成为果园农业管理现代化的发展趋势。其中,识别定位系统作为机器人采摘的关键,其对于复杂目标对象的判断、目标深度值的计算以及双目测距模型与目标检测模型的整合具有一定的难度,同时要兼顾嵌入式的落地。其在技术上的突破,必能有效提高水果识别与定位的性能,从而提升采摘精准度,提升效率,降低成本的同时带动水果产业进一步发展。本文主要针对自然环境下百香果复杂目标识别度不高、目标深度值计算精度较低以及测距模型和目标检测模型的结合等问题,研究并改进了基于深度学习网络的果实目标检测模型和基于双目视觉的目标果实测距定位算法,并将其布署在NVIDIA Jetson TX2嵌入式平台,实验结果表明在水平方向上对目标百香果进行识别定位精度相对最高,平均相对误差为10.32%;而在正下方进行识别定位,其平均相对误差最高,为12.85%。其研究结果为百香果水果采摘机器人实现奠定了基础。文章主要的研究工作分以下三部分:(1)果实目标检测。提出了基于YOLOv3的百香果检测模型,在对通用目标检测模型进行理论结构分析和验证的基础上,针对百香果目标尺寸的特点,利用基于交并比为距离度量的改进K-means++算法重新获取与目标果实相匹配的锚选框,提高对目标的框选精度以及模型的收敛速度;其次,在输出网络中将用以筛选目标预测框的Soft-NMS算法通过线性函数的形式对其高斯函数的抑制参数进行改进,以提高模型在不同密集场景下的适应性和检测能力。最后,利用增强的YOLOv3模型在经过预处理之后的百香果数据集上进行实验对比,实验结果表明:增强后的YOLOv3目标检测算法m AP达到94.62%,F1值达到了94.34%,较原YOLOv3算法分别提升了4.58%和3.68%,平均检测速度为25.45帧/s。(2)基于双目视觉的百香果果实测距方法及其实现。首先,分析了双目视觉测距的基本原理及流程,其次,在MATLAB平台采用张正友标定法实现了对双目相机镜头参数的获取,重投影误差为0.07,解决了相机畸变导致双目视觉测距精度变差的问题;再有,分析了计算视差的匹配算法的基本实现流程,研究并实现了SGBM立体匹配算法,该算法具有立体匹配效果好、运行速度适中的优点,适合于嵌入式系统的需求。最后,通过Python语言在Py Charm平台上对基于YOLOv3算法的测距模型进验证,试验结果表明以上算法完全满足百香果的高精度目标定位功能需求,为该算法在嵌入式平台的实现奠定基础。(3)基于嵌入式开发平台的果实识别与定位软硬件系统的实现。首先完成NVIDIA Jetson TX2平台操作系统及环境的基本安装,并基于Deep Stream框架完成了对python开发环境的部署,实现了对视频流的解编码及加速;其次,将YOLOv3目标检测算法移植入所部署的环境中,并在嵌入式系统上完成了YOLOv3的训练;最后,基于SGBM立体匹配算法,实现了百香果目标识别与定位。试验验证表明,该系统在性能上基本满足果实实时识别与定位的需求,在90cm的识别范围内,百香果的平均识别率为97%,平均帧率达到20fps,测距的平均相对误差为11.30%。
其他文献
<正>黄河是中华民族母亲河。千百年来,奔腾不息的黄河哺育着中华民族,孕育了中华文明。为传承弘扬黄河文化和展示黄河沿岸经济社会发展成就,由台湾青年自媒体创作团队和两岸媒体共同发起的“台青黄河游记”主题活动河南段于6月16日至22日成功举办,30余名台湾青年和两岸媒体人先后走访濮阳、开封、郑州、三门峡等4个地市,亲身感受黄河文化脉搏跳动与中原大地勃勃生机。传承弘扬黄河文化,赓续中华民族“根”和“魂”台
期刊
<正>共享自行车于2016年作为一种较新的事物推出,由于其方便,快捷和价格适中的特点而受到消费者的欢迎。目前,在城市街道上摆放着各种品牌的共享自行车,导致自行车乱停,单车被恶意损坏,单车成为私家车的现象。从法律和经济学的角度,本文试图解释造成共享单车存在问题的原因。
期刊
近年来,随着互联网技术的发展,共享单车成了城市短途出行的主要方式,方便、快捷地解决了通勤时最后一公里的问题,受到了投资方的青睐。但随着投资者的增多,涌现出越来越多的共享单车公司,各公司在城市投放单车的数量持续增加,监管部门及其自身管理与发展的不对称,使共享单车的弊端随之显现。对此,本文分析了共享单车运营的发展的各个阶段,及优势与弊端,并对运营平台的发展和政府监管部门提出了建议。
期刊
近年来,我国太空探测领域不断发展,探月活动日益频繁。随着月球轨道航天器逐渐增多,实时准确地获取其位置、速度、时间等信息至关重要。然而,紧紧依靠地面站资源已远远不能满足实际需要,如果能利用全球导航卫星系统(Global Navigation Satellite System,GNSS)接收机对接收的 GNSS 信号实时处理以实现自主导航,无疑将大大减轻地面站压力,降低运营成本。针对月球轨道卫星接收信
学位
森林康养强调良好的森林环境对人们身心健康的重要性,城市中也存在着多种类型的森林环境,它们是城市居民接触自然的主要途径。受当下的新冠疫情影响,大学生普遍存在焦虑和抑郁问题,影响到学习和生活。一些研究指出,通过森林环境进行森林康养等户外活动,能有效缓解大学生心理、情绪和生理问题,但疫情背景下城市森林环境的康养效果尚不明确。为此,本研究对上述疑问进行初步探索,首先对研究地点进行林业调查、测量环境数据,来
学位
小麦(Triticum aestivum)是我国最主要的粮食作物之一,而小麦条锈病是世界性的病害之一,会造成产量严重减少。小麦条锈病是由小麦条锈菌(Puccinia striiformis f.sp.tritici,Pst)引起的,特点是传播速度迅速,危害面积广。由于条锈菌群体毒性变异频繁,极易产生新的生理小种、引起现有品种抗病性的丧失,造成条锈病大规模流行传播,严重影响我国粮食的安全供给。防治小
学位
甘蔗(Saccharum spp.)是我国重要的糖料作物,由黑粉菌(Sporisorium scitanmineum)引起的甘蔗黑穗病严重影响甘蔗的产量和品质。培育抗病新品种是防治甘蔗黑穗病最为经济有效的措施。挖掘和鉴定甘蔗抗病基因是利用转基因或基因编辑技术培育抗黑穗病甘蔗新品种的前提和基础。Ca2+/H+反向转运体(Ca2+/H+exchanger,CAX)能够调节植物细胞内Ca2+水平,在植物
学位
甘蔗是重要的糖料作物和能源作物,广泛种植于热带和亚热带地区,其产糖量约占世界产糖总量的八成,具有极大的经济价值。我国是甘蔗种植大国,甘蔗是我国南方地区重要的农作物。现代栽培甘蔗由割手密种和热带种经高贵化过程育种而来,遗传背景复杂,是高倍的种间杂种,基因组中重复序列占比大。转座子是一类重要的重复序列,在植物基因组中广泛存在,是植物基因组中重要的组成成分,越来越多的研究表明转座子对植物基因组大小、结构
学位
林下经济是在中国集体林权制度改革、林业产业发展战略实现根本转变的历史背景下产生,其发展不仅巩固了集体林改成果,维持森林、林地系统持续发展,还拉动就业,增加农民收入。因此,林下经济以其良好的生态、经济效益成为新兴产业。十九大提出“健康中国”意味着我国中医药产业发展有了政策保障,以中药为基础的中医药工业也迎来发展的大好时机,因此在林下种植中药材成为了很多地区发展林下经济的主要模式之一。福建省尤溪县拥有
学位
近几年,城镇化建设进程加快,就业机会也不断增多,促使更多年轻劳动力到城市发展,导致农村常住人口多剩下一些上了年纪的老年人群。加上当前我国卫生医疗水平提升,人们寿命延长,因此农村老龄化问题日益严重。在人口年龄结构失衡的农村地区,仍有不少特色农业需要加快发展。在年轻劳动力严重不足的形势下,老龄化会给农村产业带来何种影响,是否会起到改善技术效率的作用,这直接关系到我国乡村振兴背景下农村产业经济和技术发展
学位