基于生成对抗网络的图像数据增强技术研究及应用

来源 :浙江大学 | 被引量 : 0次 | 上传用户:lzxldf2003
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会和科技的发展,人工智能技术的研究与应用备受关注,2017年,国务院印发的《新一代人工智能发展规划》,更是将其确立为国家发展战略。机器视觉是人工智能领域的重要发展分支,是人工智能的核心技术之一,并对其发展起到了至关重要的作用,基于深度卷积神经网络的机器视觉技术是当下的研究热点,具有很重要的理论研究意义和实际应用价值。目前广泛存在数据不均衡,特别是满足需求大规模、高质量训练标签数据资源匮乏且不易获得这一亟待解决的瓶颈问题。利用生成对抗网络(Generative Adversarial Networks,GANs)提取原始数据集特征,对抗生成新的目标域图像,已成为众多学者在数据增强技术研究中的优选方法,如何正确引入高频细节信息提升图像数据质量是亟待破解的关键问题。有鉴于此,本文基于GAN,以纳米颗粒扫描电镜图像超分辨和X光图像尘肺病计算机辅助诊断两个应用为切入点,面向GAN图像数据增强技术普遍存在的模型收敛不稳定、生成图像质量低等问题,基于创造性提出的双阶段损失驱动超分辨技术和局部-全局共融判别的辅助解缠图像翻译技术,提出了新型的图像超分辨和翻译模型,旨在解决生成图像信噪比低、高频细节信息无法正确融入、目标区域特征迁移能力不足等核心问题,主要创新工作如下:1、构建了基于双阶段损失驱动的图像超分辨网络(Dual-Staged Loss Driven Network,DSLDN)提升图像超分辨质量。该模型分为两个阶段:第一阶段采用深度残差通道注意力网络和平均绝对误差(Mean Absolute Error,MAE)损失函数,提高了生成图像峰值信噪比(Peak Signal to Noise Ratio,PSNR)。在Set5测试中,PSNR指标由28.417提升到32.139;第二阶段采用判别网络和对抗损失函数,保持高水平PSNR,引入高频细节信息提升图像数据质量。在Set5测试中,结构相似度(Structure Similarity Index Measure,SSIM)、信息保真度(Information Fidelity Criterion,IFC)最高分别达到:0.894和3.709,较非深度学习方法分别提高了9.4%和34.7%。在视觉和定量评价中均优于当前同类模型。2、构建了多局部判别器辅助解缠网络的图像翻译网络(Local Discriminant Auxiliary Disentangled Network,LDADN)提升图像数据质量。在经典风格迁移的基础上,原创性提出了局部-全局共融判别的辅助解缠图像翻译技术,通过引入多个相互独立的局部判别器和对应的局部对抗损失函数,生成目标域图像对应区域不同高频细节信息,实现了差异化的正确融入高频信息,即全局和多局部损失融合驱动生成优质图像。实验结果表明,IS(Inception Score)、FID(Fréchet Inception Distance)、KID(Kernel Inception Distance)以及LPIPS(Learned Perceptual Image Patch Similarity)指标较当前主流模型取得了较大性能提升,分别达到:1.460、1.327、5.513±1.152和0.512±0.076。3、提出了一种基于DSLDN模型的纳米颗粒扫描电镜图像超分辨方法。构建了实验训练数据集(120000张);优选了模型损失函数;优化了模型参数;提出了“催化活性位点”概念,建立了基于催化活性位点的电镜图像超分辨质量评价方法,并通过化学催化实验验证了该方法的有效性。文献中普遍采用的图像超分辨质量定量评价方法和本文提出的催化活性位点评价方法的评价结果均显示:经本方法超分辨后的图像可以获得更多纳米材料细节信息。为具有活性位点的催化剂效能分析提供了新工具。4、提出了一种基于LDADN模型增强X光医学图像尘肺病辅助诊断方法。与合作单位共同构建了原始数据集(健康:1528张,尘肺:904张);优化了网络模型,引入局部拉普拉斯滤波器及损失函数对图像病灶区域细节信息进行重点迁移生成。训练并测试分类性能,分类准确率由原始数据集的92.40%提高至增强后的99.31%,超越了目前人类专家阅片准确率,有效提高计算机辅助诊断系统的性能。
其他文献
为了解决3SEC004PO出口管道振动问题,依据水锤压强的计算公式,分析了含气量对有压供水管道水锤压强的影响,研究结果表明有压供水管道内含有气体会进一步增加水锤压强值,且含气量越大水锤压强升高值越大,所含气体的温度越高,水锤压强升高值越大。基于水锤理论、功能原理、动量定理以及虹吸效应具体分析了3SEC004PO出口管道振动的根本原因,并针对根本原因采取针对性的改进措施,解决了3SEC004PO出口
<正>国家湿地公园是自然保护体系的重要组成部分,是开展湿地科学研究和宣传教育的重要平台,是开展湿地保护与合理利用的有效方式,是探索人与自然和谐共处的重要途径。2020年3月,习近平总书记在考察杭州西溪国家湿地公园时强调,要让湿地公园成为人民群众共享的绿意空间。因此,要采取有效措施,加强国家湿地公园的发展建设。笔者结合工作实际提出以下三条建议:
期刊
德育工作是“培养什么样的人”和“怎样培养人”的根本保障,基层学校对此非常重视,因而德育课程和德育活动层出不穷,但更多以碎片化形式呈现,存在目标不明、指向不统一等问题,往往花时多而收效少。因此,亟需基于育人目标和课程理念,将少先队课、团课、各类专题活动与德育课进行有机结合、系统规划,整体架构学校德育体系,重定课程目标、重构课程内容,建设具有特色的学校德育课程,提升学校德育实效。
<正>随着素质教育的深入发展,在小学语文教学过程中,教师要立足新课标的要求,强化学生对语言文字的学习与锤炼,在建构学生自信心的基础上培养其良好的学习习惯。尤其是在主题积累的过程中,语文教学要以学生的主题阅读为契机,在根植于生活的基础上积累知识,在自问自答中内化知识,将主题积累的内容沉淀并转化为学生的习作能力,在博观约取中实现厚积薄发。
期刊
<正>针对学生死读书、读死书现象,陶行知先生提出生活教育的理念,其逻辑起点是教育要以生活为前提,根据生活所需进行改变。小学德育很大程度上忽略了生活教育,其原因在于,教育者大多认为学生缺乏生活经验,生活与学生的学习有着无形的“围墙”。这样的思想基础,就注定会让小学德育脱离生活。因而,攫取生活教育的理念,及时将学校德育与学生生活联通,把生活作为学校德育的“源头活水”,是学校德育永不过时的有效策略。
期刊
目前,我国公路路面维护区交通组织大多以高速公路为研究对象,而对山区公路研究较少,山区普通干线公路道路环境复杂,在进行路面维修养护作业时,容易造成长距离堵车现象,降低道路通行能力。因此,需要对山区普通干线公路维护作业长度及通行能力进行研究,合理设置路面维护作业长度,改善维护路段的交通运行状况。本研究结合依托工程,采用人工调查法和视频录像法进行实地数据采集,旨在获得路面维护区路段真实交通数据,分析作业
<正>心理教育是新文科建设的重要任务之一,是新时代背景下全面实施素质教育的重要方式,对保证学生身心健康,促进全面发展具有积极作用。德育是学校教育的重点内容,包括思想、政治、道德、心理健康等方面的教育,近年来随着对学生心理问题的重视,心理健康教育也得到了学校的广泛重视,已成为德育的主要组成部分,旨在解决学生的心理问题。但是结合现状分析,德育在学校广泛实施,但是对心理健康教育的重视有所不足,因此导致两
期刊
本文依照现实情况,对当前信息科技教师在实施新课标过程中可能遇到的问题进行梳理,并依据新课标要求和具体实例的分析,阐述了教师应如何通过课程达到核心素养的培育目标,以期给予些许实际操作建议。
The manufacturing sector is envisioned to be heavily influenced by artificial-intelligence-based technologies with the extraordinary increases in computational power and data volumes. A central challe
期刊
在众多学科中,数学学科始终处于一个重要的地位。每个学生从上学之日起,就与数学接触,开始学习数学课程。但是,事实上真正的数学学习应从小学一年级开始算起。数学学习的起点是小数数学,其也是以小数数学为基础。解决问题在小学数学教学中处在重要的位置。小学学生在学习数学的过程中,主要区别是学生的数学理解能力、思维方式和其解决问题的思路与技巧。因而,在开展小学教学活动的过程中,教师应该注重培养学生解决问题的思路