基于机器视觉的智能冬枣检测分级系统

来源 :陕西科技大学 | 被引量 : 0次 | 上传用户:alanyu97
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
冬枣甘甜酥脆,富含维生素,是秋冬季果品市场中热销水果之一。随着消费者对水果品质的重视,果农为了继续提升冬枣在果品市场中的竞争力,将冬枣分级关键指标增多至四项,分别是果面缺陷、果径、果形指数和果面着色比例。愈加严格的冬枣分级工作暴露了果农分级冬枣低效、易受客观因素影响和人力成本过大的问题。同时也暴露了冬枣分级机易损伤冬枣果皮和分级指标不足的问题。针对目前冬枣分级存在的问题,本文设计一套基于机器视觉的智能冬枣检测分级系统,将机器视觉引入冬枣分级检测任务中,根据四项冬枣分级指标确定冬枣检测分级算法开发思路,通过深度学习模型建立果面缺陷冬枣检测模型,通过图像处理算法开发果径、果形指数和果面着色比例三项分级指标的提取算法,通过气吸机械臂剔除果面缺陷冬枣,通过人机交互平台实现果农与本系统的智能交互,最终达到智能检测分级冬枣的目的。本文的主要工作:(1)基于机器视觉的智能冬枣检测分级系统设计。首先分析人工分级和冬枣分级机存在低效和分级不合理等痛点,从而确定分级需求,并以此对智能冬枣检测分级系统进行总体方案设计,然后分别对冬枣运载设备、冬枣图像采集设备、果面缺陷冬枣剔除装置以及智能冬枣检测分级平台中的果面缺陷冬枣实时检测算法、冬枣图像分级算法和人机交互平台进行方案设计,最后对系统的软件环境进行选择。(2)改进SSD的果面缺陷冬枣实时检测模型搭建。本文研究对象是产自陕西大荔的虫蛀、轮纹和木质化三种果面缺陷冬枣和果面正常冬枣。首先为了实现果面缺陷冬枣实时检测,本文选择SSD作为检测模型,并更换SSD主干网络为计算量更小的MobilenetV3,就此建立MobileNetV3-SSD模型,为实时检测奠定基础;其次分析缺陷与果面的面积之比,发现三种缺陷尺寸不同,故引入RFB以实现模型多尺寸提取冬枣缺陷特征的能力,并改进RFB的卷积结构以降低引入该模块对模型实时性的影响;最后分析缺陷分布规律,发现三种缺陷位置随机,故用CBAM中的空间注意力模块(SAM)代替挤压激励块(SE)以增强模型定位冬枣缺陷特征的能力。(3)冬枣图像分级算法研发。首先根据果径、果形指数和果面着色比例三项分级指标提取顺序对该算法进行总体流程设计。然后设计三项分级指标提取算法:通过ROI实现冬枣果面图像提取;通过加权平均灰度化和冬枣果面图像分割算法提取冬枣轮廓;通过最小外接圆提取冬枣果径特征;通过冬枣轮廓的面积与周长比提取冬枣果形指数;通过分析冬枣果面赭红色在HSV的H通道下对应像素值范围,从而提取冬枣果面着色比例;通过判断树设计冬枣果面图像分级算法,实现冬枣图像分级。最后开发果面缺陷冬枣中心坐标计算与转换算法,以便气吸机械臂根据世界坐标完成果面缺陷冬枣剔除工作。(4)基于双气吸机械臂协同的果面缺陷冬枣剔除算法开发。首先设计果面缺陷冬枣实时中心坐标更新算法以便为后续的剔除算法提供缺陷果的坐标信息。其次利用D-H法完成气吸机械臂建模,并求解其正逆运动学,然后根据分配的剔除区域完成协同剔除算法,最后通过五次多项式完成剔除缺陷果的路径规划算法。(5)平台交互界面设计与智能冬枣检测分级系统测试。首先通过PyQt5设计平台交互界面:创建果面缺陷冬枣实时检测子界面供果农随时监测当前批次中各个冬枣的果面缺陷情况;创建冬枣品质数据库查询子界面,供果农查询各批次中冬枣分级结果。最后依次对果面缺陷冬枣实时检测模型、冬枣图像分级算法和果面缺陷冬枣剔除算法进行性能测试。测试结果表明,改进SSD的果面缺陷冬枣实时检测模型,均值平均精度(Mean average precision,mAP)达到 91.89%,检测速度达到 40.85FPS。同时冬枣图像分级算法和双气吸机械臂协同剔除果面缺陷冬枣准确率分别为 97.11%和 98.00%。
其他文献
三维人体建模技术在影视制作、游戏开发、虚拟试衣等领域有着广泛的应用。由于人体结构复杂且表面的非刚体运动较多,目前高精度的三维人体建模方法主要依赖于复杂且昂贵的多视角相机系统或激光扫描仪得以实现。随着2015年SMPL形变模型的提出,用参数控制模型变化以模拟人体变化的技术得到了长足的发展,该技术可将复杂的人体三维重建问题转化为模型参数的优化求解问题。基于此模型衍生出大量SMPL系列人体形变模型,如包
学位
雾霾是由于大气中的粒子吸收和散射光而引起的一种自然现象。在雾霾天气下获得的图像能见度和颜色保真度损失较严重,这些图像在计算机视觉应用中造成了重大问题。因此,单图像去雾作为一项基本的视觉任务,在过去的几十年里已经引起了计算机视觉界研究学者们的广泛关注。本论文基于有雾图像的形成原理和大气散射模型研究了基于暗通道先验的去雾算法,设计了基于图像特征量和小波变换的去雾算法。本论文还研究了 条件生成式对抗网络
学位
在生产和生活中,农业扮演着一个极其重要的角色,它是一切生产活动的先决条件。而在农作物的生产活动过程中,最大的危害就是杂草,杂草不但具有旺盛的生命力,而且可以和农作物争夺养分、阳光等。随着科学技术的不断更新和进步,精准农业、智慧农业等新概念被提出,因此,研究准确快速的杂草检测方法变得十分重要。但是现有的有关杂草检测的研究还存在一些不足,如网络模型参数量大,小尺寸作物与杂草漏检误检等问题,这些问题使得
学位
由于数字图像获取过程的损坏、遮挡等问题,人们获得的图像存在不定损失,需要修复才能获得完整图像信息,图像修复技术成为了研究热点。生成对抗网络的应用,使得图像修复技术有了长足进步。但现有图像修复技术仍存在修复区域结构模糊、交界处融合效果不佳、特征信息还原不准确等问题。为此,本文对图像修复问题开展研究,主要研究工作如下:(1)针对双判别器图像修复算法(Dual Discriminator,DD)中存在的
学位
图像质量评价(Image Quality Assessment,IQA)是计算机视觉领域的基本问题之一,且在图像压缩、视频通讯、图像恢复等诸多问题中都具有非常重要的应用。由于实际应用中的图像大多是彩色的,所以彩色图像质量评价(Color Image Quality Assessment,CIQA)已成为 IQA 领域的主要研究方向。IQA的研究目标是运用数学模型来模拟人类视觉系统(Human Vi
学位
贝叶斯网络是一个集概率论与图论于一体的理论工具,是人工智能系统构建中不可或缺的一部分,已广泛用于医疗诊断、故障检测、资源管理等领域。然而对于复杂的动态系统,根据领域专家经验知识手工构造贝叶斯网络显然不切实际。从数据中利用机器学习贝叶斯网络结构时,随着变量个数的增加,候选结构模型的搜索空间将会呈现指数倍上涨。启发式搜索的学习算法时解决这个问题的一种潜在手段。但传统基于进化算法的贝叶斯网络结构学习算法
学位
能源消耗所产生的可挥发性有机气体(VOCs)给自然环境及人类健康发展带来极大的危害。而气敏传感器作为环境监测的一种器件系统,具有实时多维度分析气体成分、浓度的作用,广泛应用于化工以及医疗检测等领域。低维金属氧化物SnO2具有较大比表面积和原子薄纳米片等独特材料特性使其在气敏传感器领域的应用愈发广泛。其制备工艺简单、性能优异且结构稳定,此外,由于Y2O3带隙为5.49 eV,也使它在气敏领域引发了研
学位
近年来,有机电致发光器件因其主动发光、便携性、低功耗和机械柔顺性等特点,引起了研究人员的广泛关注,在智能包装及显示领域有着广阔的应用前景。但是目前商用化的发光器件严重依赖真空蒸镀的制备工艺,这种工艺设备价格高昂,操作复杂并且需要极高的温度,不利于低成本、大批量发光器件的生产。而采用全溶液加工法制备发光器件是有效降低成本、简化制造过程、实现大批量生产的关键之一。全溶液制备器件的难点在于对功能层及电极
学位
随着社会的变革与经济的快速发展,让越来越多人因生活和工作节奏倍增而更容易产生情绪低落、对生活失去信心和悲观等负面情绪,而这些负面情绪也会导致人体代谢和精神紊乱等多种疾病的发生,大大降低人们的生活质量。所以对于情绪的研究得到了越来越多研究人员的关注,在人机交互、医疗看护和媒体娱乐等众多领域已得到了广泛的应用。相比于面部表情、语音语调等非生理信号,生理信号中的脑电信号(Electroencephalo
学位
非线性系统控制是控制领域的一个重要分支,长期以来,学者们致力于设计响应更快,性能更优,更加切合实际生产的非线性系统控制器。在设计控制器时,必须考虑如何降低控制器复杂度,提高控制精度以及综合考虑实际生产中可能存在的多种干扰因素。另外,传统的Lyapunov渐进稳定结果对系统收敛时间未给出限制,不适用于现实工业生产中,相比之下,有限时间稳定更加具有实用价值。研究表明,满足有限时间稳定性的控制系统同时有
学位