基于深度学习的结构保持超分辨率算法

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:shihongxin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像在人们的生产生活中扮演着至关重要的角色,已成为最主要的信息载体之一。然而,易于获取的低分辨率图像存在模糊、细节不足等问题,因此图像的超分辨率重建技术具有重要的研究意义和应用价值。近十年来,深度学习取得了爆发式的发展,研究人员纷纷将其应用于图像的超分辨率重建领域,研究成果层出不穷。尽管现有算法能够获得相对清晰的超分辨率图像,但仍有许多不足之处,例如,生成的图像中存在结构失真、边缘模糊以及纹理细节不足等问题。针对上述问题,本文提出两种方案进行改进,主要工作如下:1.提出了一种基于多残差块的超分辨率重建算法。多残差块由三种不同功能的残差块组成,分别为残差梯度块、残差小波变换块和残差通道注意力块。这三种不同功能的残差块能够对图像中的各种信息做出针对性处理,从而有效地提升网络的表征能力。其中,残差梯度块能够充分保留结构信息,从而获得清晰、锐利的边缘。在残差小波变换块中,图像经过小波变换后生成了四个子带,这些子带包含不同频率的信息,有助于纹理、边缘等高频细节的重建。残差通道注意力块能够调整网络的注意力,着重学习重要的通道特征,从局部上恢复图像高频信息,增强了网络的重建效果。在4个基准数据集上进行实验,结果表明该算法的重建性能均优于其他算法:在视觉效果方面,该算法产生的图像具有准确、完整的几何结构,清晰的边缘以及丰富的纹理细节;在客观指标上,该算法产生的结果均高于其他算法。2.提出了一种基于通道-扩散双分支网络的超分辨率重建算法。通道-扩散双分支网络由通道扩散残差块级联而成。在一个通道扩散残差块中,设计了一种自适应卷积来扩展视野并从周围的空间和通道中提取更多的信息,再将提取到的信息分别输入通道注意力分支和扩散分支中计算注意力,以重新校准特征。通道注意力分支能够调整不同通道特征的大小,以加强重要语义的表达。扩散分支是对空间注意力机制的改进。在扩散分支中,受Perona-Malik扩散方程的启发设计了一个P-M扩散层,该层是一种改进的残差块,能够根据每次迭代出的梯度对边缘进行定位,在梯度较大(即靠近边缘)的地方,降低扩散系数以锐化图像的边缘。此外,扩散分支为空间信息分配不同的权重,使模型能够聚焦于重要区域,有利于图像中信息密集区域的重建。在基准数据集上的实验结果表明,所提出的超分辨率网络在视觉效果和定量结果上都优于其他算法,同时在重建质量与模型复杂度之间达到了相对平衡。另外,本文将此方法应用于芯片显微图像的重建,并利用高分辨率芯片显微图像进行硬件木马的检测。该算法在芯片显微图像上的重建效果优于其他算法,硬件木马检测准确率达80%。
其他文献
遥感图像语义分割作为重要的计算机视觉任务,其任务是在高维特征图上提取语义信息,在像素级别上对汽车、建筑、道路、树木等物体进行密集预测,常应用于地质探勘、辅助地图绘图等现实场景。在过去几年,基于CNN(Convolutional Neural Network)的遥感图像语义分割方法提升不大,其问题可以归纳如下:首先,CNN会在卷积、池化过程中丢失部分细节,导致深层特征图缺乏足够信息恢复图像信息;其次
学位
群智感知作为一种新型的物联网感知模式,能够将数以万计的零散感知设备整合成一个感知网络,并在该网络上进行大规模的感知任务,以低成本的方式实现数据的收集,在环境检测、健康医疗、交通监管、应急救险等领域发挥着重要的作用。然而,感知数据通常与个人信息相关联,任务请求者通过感知数据容易推测出个人的兴趣爱好、行为习惯等,造成严重的个人隐私泄露,影响数据收集的积极性。此外,在海量感知数据中,有相当一部分数据是重
学位
无人机的民用普及性给生产生活方式带来巨大变化,同时导致一些隐私安全问题,为实现对黑飞无人机的智能化管控与反制,急需开展对无人机目标的智能分析与监视技术研究。与可见光相比,红外传感器对光照变化不敏感,可以完成无人机长时监控任务。同时,红外图像只包含灰度信息,可以保护一些私密场景中的敏感信息。然而,远距离感知无人机红外视频图像存在复杂背景干扰、目标像素有限、特征点少等问题,相似度判别困难,导致现有算法
学位
翠绿宝石晶体是一种宽带可调谐激光晶体,具有硬度高、热导率高、抗光学损伤能力强的优异光学性质。该晶体的发射光谱位于700-900 nm之间,在超短脉冲的产生与波长调谐等方面具有极大的优势,可被广泛应用于遥感雷达、光电对抗、激光美容、激光精密加工等领域。同时,翠绿宝石晶体的吸收光谱覆盖400-700 nm,蓝光、绿光、黄光和红光波段的光源均可选作翠绿宝石激光器的泵浦源。不同波段的泵浦源有不同的优势,选
学位
信息时代发展至今,个人或企业数据的安全性、隐私性逐渐被重视,“数据可用不可见,用途可控可计量”是学术界和工业界对数据隐私的新要求。联邦学习保证各方数据不出本地私域的情况下实现联合建模,是打破数据孤岛,实现“数据不动价值动”的核心技术框架。但经过具体的学术研究和工业实践,联邦学习仍然存在一些隐私问题。首先,本地模型参数或者梯度更新可能会泄露一些原始数据集的信息,敌手可能采用重构攻击、成员推理攻击等反
学位
在声学领域中回波作为目标的重要探测手段之一,广泛应用于现代化科技体系。对于复杂环境下不同目标的回波特性的研究在实际应用中越来越看重其仿真模拟结果的正确性以及速度。板块元算法因其精度高、计算时间短的优点广泛应用于物体声散射问题求解,但是在大尺度复杂目标的多次反射计算中传统板块元算法存在严重的遮挡问题导致计算成本极速增加。基于以上背景,本文提出了时域声场强度仿真加速算法,采用弹跳射线算法以及改进的时域
学位
无线传感器网络(Wireless Sensor Network,WSN)在当今的物联网时代是一种发展和应用潜力巨大的技术。尤其在信息采集、安全检测等众多领域,无线传感器网络表现出极为优秀的使用价值和经济效益,因此在过去的数十年中始终引起国内外研究人员的普遍重视。此外,近几年无人机(Unmanned Aerial Vehicle,UAV)技术受到各国的重点关注,各国无人机的军用和民用需求也在逐年提高
学位
目标检测作为视觉领域中一个充满挑战性的基础研究方向,被广泛应用到自动驾驶、医疗预诊、智慧城市等诸多领域。在目标检测算法中,将特征提取网络提取的具有不同语义信息的特征通过特征融合网络增强其表征能力,是提升检测性能的常用手段之一。但在实际场景中,大量待检测的感兴趣目标往往具有分辨率低、尺寸较小等特点,且易混淆在背景元素中,使得常规检测方法难以提取到有用的特征,导致大量误检和漏检,不能满足实际应用需求。
学位
随着大数据时代的到来,各企业、部门组织间的数据资源共享量成倍增长,数据共享已成为各机构间交流合作的一种重要方式。数据共享的需求在不断增加,而实现数据共享的重要前提是要保证共享数据的安全可信。传统的数据存储模式通常采用集中式的架构进行访问控制管理,这种架构易受到黑客攻击,存在着用户信任、隐私泄露和单点故障等安全问题。此外集中式的架构使得数据共享方失去了对共享数据的控制权,如何加强数据共享方对数据的掌
学位
随着数字化时代的到来,移动网络和多媒体也随之迅速发展,进入千家万户,除此之外,社交网络的建立,电子商务应用的普及,使得在网络上每天都会产生大量的多媒体数据,这部分数据包括视频、图像以及文本。因此,为了满足人们的生活和娱乐需求,图文检索已经成为需要重点解决的部分。但是相比较于单模态检索,图文检索中需要处理两种结构不同的数据,图像由像素点组成,文本由字词组成;语义层面不同,图像不包含语义信息,而文本包
学位