基于深度学习的PCB和纺织布表面缺陷检测方法研究

来源 :华南农业大学 | 被引量 : 0次 | 上传用户:st_daivd
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
产品缺陷检测是产品质量管控的重要环节,印刷电路板(Printed Circuit Board,PCB)和纺织布缺陷检测具有待检测区域表面积大、背景复杂的特点,在实际检测中需要克服缺陷区域占比小、与背景对比度低的检测难点。当前行业中主要采用的检测手段有人工检测和基于机器视觉技术的检测。人工检测存在效率低、主观误差大的问题;基于机器视觉可根据检测对象的尺寸形状特点灵活搭建检测平台、提高检测效率并实现自动智能识别。2012年以来深度学习(Deep Learning,DL)快速发展。相对传统机器视觉算法,DL无需手工设计特征模型,能从大量输入图像中自学习并分层提取图像特征,识别效率和精度高,且模型的适应迁移能力及泛化性较强,基于DL的目标识别方法是当前机器视觉研究热点和前沿。本研究将结合PCB和纺织布的特点尝试不同的DL识别机制,以期为工厂搭建自动化缺陷检测系统提供新方法。具体研究工作如下:第一,PCB具有表面缺陷类型多样、出现的位置以及形状大小随机性强、缺陷面积普遍较小等特点。PCB生产企业常用的自动光学检测(Automated Optical Inspection,AOI)系统主要以编程设定好的标准为基准判断缺陷,自适应扩展能力相对较差;且成套系统价格昂贵,核心算法和技术主要被国外掌握。在此设计了一种基于改进的NAS-FPN(Neural Architecture Search and Feature Pyramid Network)DL模型的缺陷检测方法,旨在为AOI设备图像处理软件开发提供理论支撑。本研究采集了8类PCB表面缺陷,并通过数据扩增技术构建了由31348张512×512像素图像构成的PCB表面缺陷图像数据集。引入具有神经结构搜索功能的NAS-FPN,此网络在一个覆盖所有交叉尺度连接的可扩展搜索空间中,采用神经网络结构搜索,发现一种最好的FPN结构,并将其取代检测器(Faster R-CNN)中的特征提取器以生成更高质量的金字塔特征图。实验结果表明,采用Resnet_101为骨干网络,与经典的Faster R-CNN、YOLO、Faster R-CNN+FPN相比,在PCB表面缺陷检测任务上检测平均准确率分别提升18.76%、10.79%、9.94%,识别速率为0.076s。第二,纺织布表面缺陷具有背景复杂、与背景对比度低、语义信息弱等特点。当前基于机器视觉的纺织布表面缺陷检测技术常依赖于具体的任务以及人工设计的特征,局限性较大,无法广泛应用于各类纺织布缺陷的检测。在此提出了一种基于改进的Faster R-CNN的模型,为机器视觉检测设备上的缺陷识别模块提供新的图像分析方法。本研究对企业提供的图像数据进行扩增后,构建了由17类共13400张512×512像素图像构成的纺织布表面缺陷图像数据集。在Faster R-CNN模型中使用共享卷积层的RPN和Resnet50以确定纺织布图像中缺陷候选区域和对候选区域进行分类和回归。测试结果表明,在Resnet50网络结构的最后一层引入Dropout,并在全连接层用SeLU激活函数替代ReLU激活函数,与经典的Faster R-CNN相比,在纺织布表面缺陷图像测试集上检测平均准确率提升5.9%,每秒可以检测9张图像。实验证明,两种模型针对以上PCB和纺织布表面缺陷进行检测时均表现出较好的准确性和实时性。最后,本文对PCB和纺织布在线检测系统的工作机制分别从硬件和软件系统设计方面进行阐述。
其他文献
随着数字仿真技术、数字化图像技术与计算机科学技术、计算机硬件设备的迅速发展,多元化的媒体逐渐丰富着人们的生活。从2D图像到3D图像,再到4D体感媒体的出现,人们不再满足单一的视觉媒体,既要求视角逼真,又要求交互性强。因此,虚拟现实Virtual Reality(VR)技术作为仿真技术的一个分支,逐步得到发展并流行起来。VR技术以其自然逼真、交互性强的特点有效地弥补了传统仿真技术不够逼真、交互性偏弱
学位
核桃有“长寿果”、“脑黄金”之称,具有很高的营养价值和经济价值。然而,核桃等坚果检测技术方法的落后与现代化生产高质高效的要求相去甚远,已经严重制约了我国坚果产品在国际市场上的竞争力。为此,本文选取新疆南疆核桃果实为研究对象,以果实饱满度作为其内部商业品质评价的主要技术指标,采用X射线计算机层析成像(X-ray Computerized Tomography,简称XCT)技术,并利用计算机图像处理与
学位
拖拉机在农业机械化领域具有举足轻重的地位,近年来我国大力扶持农业机械化的发展,拖拉机数量也在每年飞速增加。随着人们工作生活水平的提升,现有的拖拉机的舒适性水平已落后于驾驶员的需求,拖拉机振动不适性对驾驶员的身心以及作业效率都造成伤害。本文通过分析提高驾驶员减振舒适性的可行方法,发现设计合理的座椅悬架减振机构是目前减小驾驶员振动不适感最优方案,基于磁流变阻尼器设计了一款可实时调节悬架阻尼力的半主动座
学位
近年来,农用植保旋翼无人机以其体积小、操作灵活、不受地形限制及无需专门起降场地等特点,在我国被迅速的广泛应用起来。旋翼无人机进行植保喷施作业时的一个显著特征就是其高速旋转的旋翼除为机体提供动力外,还会产生强烈的下洗气流向下运动并与作物冠层相互作用,迫使作物冠层围绕风场作用位置向四周倒伏,形成一个锥形的涡旋形状。而药液雾滴自喷头喷出后在沉降过程中极易被卷入旋翼下洗气流场中,此时雾滴的运动状态几乎完全
学位
由于具有高理论比容量(1675 mA h/g)和比能量(2600 Wh/kg),还兼备来源广泛、绿色无污染等特点,锂硫电池被认为是最有潜力的下一代储能器件之一。但是,硫及其反应产物的导电性差、反应过程的体积变化大以及反应中间体的穿梭效应等多种不利因素,限制了锂硫电池的推广应用。针对上述问题,本论文从从隔膜修饰和正极材料两个方面进行改性研究,一方面希望正极具有较强的化学吸附能力和催化转化能力,在限制
学位
在稻田生态系统中,杂草与水稻争夺生长空间、肥料养分、光照、热等资源,是影响水稻产量下降和品质降低重要原因之一。有效的控制杂草生长是水稻生长过程中的重要环节。施用化学除草剂是目前应用广泛的一种杂草防控方式,长期、大量、高频的施药会造成杂草抗药性、药害、环境污染等负面问题。为此,大力发展机械除草是保证农业可持续发展的关键。然而,在实际作业中,苗带弯度变化引起除草执行部件伤苗问题,严重制约了机械除草技术
学位
铅卤钙钛矿因其优异的光电性能而成为近年来光伏研究的热点,其中基于有机-无机杂化钙钛矿材料的太阳电池得到了迅猛发展,其认证的光电转换效率(PCE)达到25.2%,能与商业化硅基太阳电池相媲美。尽管有机-无机杂化钙钛矿电池(PSC)已经达到了很高的效率,但由于有机离子的存在,导致器件在高湿度和高温下容易分解,通常稳定性较差,特别是热稳定性差,限制了其商业化的应用前景。为了克服这个问题,采用无机阳离子(
学位
中国是水利事业发展的大国,拥有许多大大小小的水坝。而水坝使用有一定年限之后就会出现结构性的问题,水坝的混凝土表面出现裂纹,这样会降低水坝的承载能力,而目前针对于这种情况主要是采用人工上水坝去检测并修复裂纹,而人工上水坝检测,效率低下,危险程度比较高,而且受检测人员专业素养制约,很难满足高效率等需求。因此,人们迫切需要一种自动检测水坝的设备。而实现自动检测水坝表面的裂纹,对复杂背景的水坝的表面裂纹进
学位
杂草与作物竞争阳光、空间、水分及养分,是导致作物产量降低及品质下降的主要因素。施用化学除草剂是目前应用最广泛高效的除草方式,却也引发了诸如食品安全、环境污染等负面问题。近年来,机械除草技术作为一种安全、环保、高效的除草方式,成为解决化学除草负面问题的重要手段。然而,传统机械除草执行部件难以根据苗带弯度的变化而改变,导致行间除草伤苗严重,制约了机械除草技术及装备的发展。因此,开展水稻苗带识别,对除草
学位
深松作业能够破碎在长期旋耕作业的耕作层下面坚硬的犁底层,有利于改善长期耕作产生的原有土壤理化结构、生物学性质,另外深松作业还能够增强土壤的保水保肥能力,促进农作物根系生长,增加农作物产量和农产品的品质。但是,深松作业耕作阻力大,耗能高,如何提高深松机具对不同耕作后深松作业的适应能力、把耕作过程中的牵引阻力尽可能减小。是近年来农业机械工程研究和深松技术推广的重点之一。深松铲作为直接与土壤接触的部件,
学位