基于机器视觉的复杂环境下表面缺陷检测技术研究

来源 :华北电力大学(北京) | 被引量 : 0次 | 上传用户:gklyliu
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
基于机器视觉的表面缺陷检测是生产过程自动化、智能化发展的需要。表面缺陷检测作为工业生产中产品质量监控的重要环节,能够有效地提高产品质量和生产效率;表面缺陷检测还是进行日常设备维护的重要手段,及时发现表面缺陷能够有效延长设备的寿命。随着机器视觉和人工智能技术的发展,对于背景单一、缺陷明显等简单环境下的表面缺陷已经取得了较好地检测效果,具有较高的准确率。但是对于复杂环境下的表面缺陷,由于干扰因素多、涉及的领域广,大大增加了缺陷检测的难度,为实现智能检测和制造强国、质量强国发展战略,复杂环境下表面缺陷的高精度检测是一个亟待解决的问题。本文以表面缺陷为研究对象,基于机器视觉技术,针对复杂环境下的表面缺陷检测问题进行了深入研究,采用鲁棒性主成分分析和深度学习技术,提出了解决的方法。本文的创新和主要研究工作如下:(1)针对采集的图像中光照不均和检测结果中缺陷不连续的问题,提出了一种基于视觉显著性和鲁棒性主成分分析的表面缺陷检测方法。该方法将缺陷图像看成由低秩矩阵表示的非缺陷区域、稀疏矩阵表示的缺陷区域和噪声矩阵组成,通过对表面缺陷的人工特征提取,基于改进的鲁棒性主成分分析求得稀疏矩阵。为抑制非均匀光和检测出连续的缺陷区域,在鲁棒性主成分分析基础上,增加了F范数和拉普拉斯正则项。再根据稀疏矩阵,采用视觉显著性,实现对表面缺陷的检测。对提出的方法,在人工数据集和风机叶片数据集上与其他传统方法进行了比较,结果表明所提出方法能够有效抑制非均匀光和噪声,检测出连续的缺陷区域,提高缺陷检测的性能。(2)针对复杂环境下,传统的表面缺陷检测方法难以有效检测缺陷的问题,提出了一种基于注意力机制的深度神经网络表面缺陷检测模型。该模型基于编码器-解码器架构,编码器采用ResNet34提取各层特征,通过在编码器和解码器间增加基于注意力的更高层特征提取模块,以获取更高层的语义上下文信息,更好地定位缺陷区域。此外,在解码器各层引入基于注意力机制的解码模块,利用空间和通道注意力机制,提升对表面缺陷定位的准确性。对提出模型在两个公开路面缺陷数据集CFD和CRACK500上,与其他8种模型进行了性能对比,提出模型在评价指标F-measure和IoU上取得了最佳的检测结果。(3)针对低对比度、微小缺陷和缺陷种类形态多样以及非均匀光等给表面缺陷检测带来的巨大挑战,为提升复杂环境下表面缺陷检测方法的准确性和通用性,提出了一种基于深度神经网络的多层多级特征融合的表面缺陷检测模型。该模型首先利用ResNet50提取多层特征,然后利用多层特征聚合模块融合各层特征,具体过程为先采用横向连接和特征融合块自下而上融合特征,再利用跳跃连接与高层特征相加融合,从而使各层不仅包括丰富的局部信息,而且包含高层的语义上下文信息。接着再利用多级解码器进行特征深度融合,多级解码器包含多个解码分支,各分支结构相同,各级解码器利用横向连接传递各层特征。前一级解码分支的输出还通过反馈连接与各层特征融合后再传入后一级解码器。通过多层多级特征的深度融合,实现对表面缺陷的准确定位和分割。在三个不同类型的复杂表面缺陷数据集MT、RSDD和CFD上和多种模型进行了实验对比,结果表明提出模型能够有效提升表面缺陷检测的性能和通用性。(4)为进一步提升复杂环境下表面缺陷检测的性能,采用FCN构架,提出了一种基于两级注意力特征融合的表面缺陷检测模型。该模型首先利用ResNet50特取表面缺陷的各层特征,为更好地检测微小缺陷,增加了一个基于扩张卷积的多尺度特征提取模块。然后将各层特征送入两级注意力特征融合模块,该模块先通过基于注意力的相邻特征融合模块在各层进行相邻特征融合,再通过基于注意力的高层特征融合模块实现将各层与其高层特征融合,通过两级特征融合,各层能够包含更多的局部细节信息和全局语义信息。最后将各层特征拼接融合,经过边界求精模块和卷积模块,输出缺陷分割图。为验证提出模型的有效性,在三个不同类型的表面缺陷数据集SD900,MT和CFD上与其它模型进行了对比,结果表明提出的模型具有最优的检测性能和较强的通用性,IoU分别提高到89.90%,76.72%和 64.92%。
其他文献
老芒麦(Elymus sibiricus Linn.)隶属于禾本科披碱草属。该物种是我国北方草原和青藏高原天然草原(地)植物群落中的重要组分,也是判定此类草原(地)牧用品质的一个重要参数。青海省大部分地区处于半干旱气候条件下,水分亏缺是限制牧草生产的重要环境因子。因此,研究老芒麦干旱适应机理,提高其水分利用效率具有重要的理论研究价值和现实意义。本论文以15-195老芒麦(野生种)为试验材料,青牧1
醇选择性氧化生成相应的醛、酮、酸是合成许多有机化合物的重要步骤,也是研究最广泛的反应之一,因为羰基基团和羧基基团广泛存在于药物、维生素、香料、聚合物和精细化学品的分子中。传统醇氧化方法常依赖重金属氧化剂进行,存在许多缺点。从环境的角度来看,开发绿色、可持续的醇催化氧化方法已成为人们关注的焦点。相较于传统热催化氧化法,光催化氧化是在无毒、无害的条件下实现的高效清洁的化学反应过程,能最大程度地减轻工业
换流变压器是高压直流输电系统中不可代替的关键核心装备之一,其绝缘性能的可靠性对直流输电系统的安全运行至关重要。目前,换流变压器的绝缘设计和校核主要采用基于正负电荷等值迁移的电阻-电容模型(Resistivity-capacitance,RC),其仅考虑了界面极化电荷。目前已有的研究表明在高温作用下油纸界面除界面极化电荷外,存在肖特基注入电荷。现有的高温下电场分析计算模型多为针对μm级厚度绝缘纸的研
米芾《畫史》是繼張彥遠《歷代名畫記》之後,中國繪畫史中又一重要文獻。《畫史》載録自晉至宋朝米芾所閱之畫作,列其藏家、述其風格、辨其特征、論其真假,并敘裝潢裱褙、筆墨紙硯之製,間或天文、聲韻之論,是研究魏晋至北宋繪畫傳統的關鍵史料。米芾所處的時代,在朝廷的推崇與文人修养推動下,形成了獨特的品評標準和觀看方式。本文試圖在校勘的基礎上,以文獻學和美術史的雙重視角來審讀《畫史》,试图勾勒米芾及其同时期士大
稠环化合物广泛存在于天然产物、药物分子和生物活性分子之中。此外,由于其独特的共轭体系,使得它们在有机光电材料领域具有很大的潜在应用价值,开发简洁高效的路线合成稠环化合物是国内外有机合成工作者关注的热点方向之一。本文主要研究钯催化C-H键活化构建稠环化合物,利用芳基卤化物原位形成的活性钯杂环,实现邻位官能团化和新颖转化。本文主要包括以下五个方面内容:一、对近年来利用钯环中间体发展的官能团化和新颖的转
太阳能热互补联合循环发电(ISCC)系统作为一种较为清洁、高效的发电技术,在降低燃气-蒸汽联合循环机组中天然气消耗量及污染物排放量的同时,还可以降低光热系统的投资,减小光热运营成本。本文主要以槽式太阳能热互补联合循环发电系统为研究对象,制定系统不同工况下的运行策略,并以此为基础对其展开动态性能研究。通过对比分析三种不同槽式ISCC系统(传统的导热油槽式技术、直接蒸汽式的槽式技术、以压缩空气为换热工
沸腾传热是高热负荷表面保持相对较低温度的有效手段,具有高传热系数的特点,在航空航天、机械制造、芯片冷却以及能源化工等诸多工业领域具有广泛应用和重要意义。近年来,随着微纳结构表面和表面改性等强化技术的发展,使得微尺度下沸腾传热继续变成相变传热强化等领域的热点之一。由于实验手段和理论研究很难从分子层面进行分析和观察,分子动力学被广泛地应用到纳米尺度沸腾现象与机理的研究中。因此,本文采用分子动力学模拟方
实现“3060”双碳目标的核心措施之一是持续推进使用风能、太阳能等绿色能源替代传统的化石能源。而在绿色能源电价补贴退潮的大背景下,如何提高风电场的运维水平、加强风电机组运行状态监测技术的信息化、自动化和智能化已成为风电行业的重要研究课题之一。本文使用获取成本低、测点类型丰富的数据采集与监视控制(Supervisory Control and Data Acquisition,SCADA)系统的历史
煤炭燃烧过程导致的砷、硒和铅等有害痕量元素污染问题已经引起国际社会广泛关注,其中燃煤机组是主要人为排放源之一。本论文在优化微波强化消解法基础上,与氢化物发生-原子荧光光谱法相结合,建立了煤及其燃烧副产物中砷、硒和铅含量的精准测试方法,进而采用逐级化学提取法确定了上述微量元素赋存形态的分布特征。具体考察了洗煤过程煤中砷、硒和铅迁移转化规律和热释放特性;针对超低排放燃煤机组,开展了全流程砷、硒和铅迁移
在现代玻璃艺术研究领域,多数学者把焦点投向了美国——被学术界定义的“国际工作室玻璃运动”的发源地。事实上,捷克“工作室玻璃”的萌芽要早于美国,捷克在窑铸玻璃领域建立起来的独特的学术体系与工艺制度模式更是在全球形成了先行的示范。然而,无论是捷克本土还是其他国家,研究者们对玻璃的观看几乎都是从作品鉴赏或者工艺教学的角度着眼,鲜有针对某类具体的工艺系统进行专项的梳理与深掘,这给本文提供了一个着实的切入点