基于生成对抗网络的红外图像增强研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:chen17983
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
红外图像中往往包含很多人眼不易或不能察觉的信息,在国防军工,安保监控等方面应用广泛。但是红外图像存在色彩单一、分辨率低等问题,所以红外图像增强一直是研究的热点,例如红外图像彩色化,红外与可见光图像融合,红外图像超分辨率重建等。基于传统算法的红外图像增强方法往往依赖像素间的关系,不能很好地学习图像内的信息与特征。生成对抗网络(GAN)通过生成器和判别器的博弈优化网络性能,可以充分学习图像中的信息与特征,在图像生成方面有巨大优势。因此,其在红外图像增强方面的应用值得研究。本文重点研究基于GAN的红外图像彩色化和红外与可见光图像融合这两个红外图像增强问题。
  在红外图像彩色化研究上,为了获得更加逼真和细致的彩色化结果,本文提出了一种DenseUnetGAN结构。本文改进了基于Unet的生成器,并添加多种损失函数优化彩色化结果。同时设计了反卷积优化的判别器。在大型公开数据集上的测试结果表明,本文的方法不仅在视觉上有更加逼真的效果,同时在结构相似性(SSIM)、熵(EN)等量化指标上也高于其他的图像上色方法。由DenseUnetGAN生成的彩色图像可以检测到的SURF特征点数量相当于原始彩色图像的93.49%,具有很好的特征重建能力。此外本文还对预处理数据集时采用的人脸定位神经网络实现了FPGA加速。实验表明,本文的加速方法相对于同开发板的ARM嵌入式计算有45倍的速度提升。
  在红外与可见光图像融合研究上,为了获得包含更多信息的清晰融合图像,本文提出了一种LBP-BEGAN结构。本文设计了基于局部二值模式(LBP)这一边缘特征提取算法的LBP损失函数,以保障融合图像具有更多的边缘信息。同时设计了基于分布的判别器结构,在没有理想的融合图像作为标签的前提下,建立起生成器和判别器的对抗损失。在TNO和INO数据集上与其他八种融合算法的对比结果表明,LBP-BEGAN的结果不仅在视觉上具有明显清晰的边缘,而且在六个有代表性的客观评价指标的综合评估上也优于其他对比算法。
其他文献
随着现代社会中各种通信设备不断向着智能化和小型化发展,无线通信系统中各项电路模块的可重构特性成为重要的研究热点,其中接收机中的可变增益放大器作为可重构型放大器的典型代表受到了广泛关注。位于接收机中的可变增益放大器具有调节电路增益大小的作用,其带宽影响着数据传输速率,且不同应用场景下的无线通信收发系统所需要的信道带宽也不尽相同。另外,半导体工艺的发展使得低成本、易集成的CMOS工艺成为系统化芯片设计
太赫兹波具有穿透性强、安全性高、信息承载量大等特性,因此被广泛应用于安全检测、生物医学、环境检测、信息通信等领域。太赫兹技术性能优越,近几年来成为科学研究的热点。太赫兹探测器和太赫兹辐射源作为太赫兹技术最重要的模块之一,一直受到科学界的广泛关注。但是大部分太赫兹探测器和太赫兹辐射源是基于光学技术基础上研制出来的,这些系统体积大,成本高,集成度低。相比而言CMOS工艺太赫兹探测器和太赫兹辐射源体积小
学位
随着低成本硅技术的发展,利用硅技术实现太赫兹片上系统成为了国内外研究的热门课题。太赫兹片上天线可以避免封装过程产生的损耗和不确定性,并且可以提高系统的集成度,具有非常高的应用价值。然而,由于半导体工艺的制约,硅基太赫兹片上天线通常在辐射效率、增益和带宽方面受限制,而无法满足实际的工程需求。因此,设计高性能的太赫兹片上天线具有非常大的研究意义。本文针对硅技术的太赫兹片上天线进行了相关研究,主要工作包
学位
宇宙仍存在很多未知的谜题等待解答,人类探索的脚步也从未停止。为了更好探寻宇宙的奥秘,满足更快巡天速度、更广探测视角以及更高灵敏度的需求,成立了平方公里阵列射电望远镜(Square Kilometre Array,SKA)国际项目。SKA项目中信号处理应用到的重要技术为波束形成技术,这种技术不仅仅被用在SKA天文领域,也被广泛应用雷达以及通信等领域。它的原理是通过采用相控阵或者时控阵,使期望信号相干
学位
极化敏感阵列是一种能够感知电磁波极化信息的新型阵列,与传统标量阵列相比,极化敏感阵列具有分辨率高、抗干扰能力强的优势。一方面,完备的极化敏感阵元可以感知入射信号的完整电场与磁场矢量,其测量信号的数据维度是普通标量阵元的六倍。基于极化敏感阵列的接收信号建模更加复杂同时信号处理所需要的运算量也更多。另一方面,在许多实际应用场景中,信源往往位于阵列的近场区,而传统基于远场假设的测向算法无法直接扩展到近场
射频功率放大器作为现代移动通信系统中的核心部件和最主要的耗能单元,其效率水平对整个射频前端的功耗、散热和电路尺寸等都有着重要的影响。近年来,人们提出了多种用于提升射频功放效率的技术,如工作在开关模式的E类和采用谐波调谐模式的F类/逆F类等。然而,晶体管的高频寄生效应会对功放匹配最佳阻抗产生严重干扰,进而影响射频功放的效率性能。此外,为了适应无线通信技术往多模式多频带方向的发展需求,越来越多的研究人
现代IC(Integrated Circuit)设计经常涉及到第三方IP(Intellectual Property)核、外包的测试与设计服务以及第三方EDA(Electronic Design Automation)工具。这种在地理上高度分布的商业模式使得IC很容易被第三方攻击者在原始电路中插入恶意逻辑,即硬件木马(Hardware Trojan,HT)。  由于硬件木马的隐秘性,传统功能验证很
学位
近年来,随着第五代移动通讯技术(5G)的快速布局,虚拟现实、自动驾驶、远程医疗等新式应用场景带来数据浪潮将引起更高的电力消耗。以5G基站为例,大规模天线技术(Massive MIMO)的引入使5G基站能耗达到4G基站的3倍,如何降低微波系统功耗成为5G发展的首要问题。高品质因数(Q值)微波介质陶瓷是低功耗微波器件的基础,综合提升微波介质陶瓷介电性能是解决5G功耗问题的关键。本文以MgTiO3为基础
里德-所罗门(Reed-Solomon, RS)码自提出起就因它在纠随机错误以及突发错误方面优秀的纠错能力而被广泛研究,并且在诸多领域,例如:深空通信,光纤通信,无线传输以及数据存储等多个领域都有着很好的发展前景。RS码译码算法按照其对接收电平的不同处理方式可以划分为硬判决译码算法(HDD)以及软判决译码算法(SDD)两类。硬判决译码算法直接利用传输信号的判决结果进行纠错,算法灵活,硬件架构易实现
学位
基于线性模式雪崩光电二极管的激光雷达具有响应时间快,灵敏度高的优点,在无人机、3D成像和汽车辅助驾驶等领域具有广泛应用。传统的激光雷达读出电路采用分立器件设计,存在系统成本高、体积大、集成度差的问题。为实现激光雷达的高速、高精度和单芯片信号处理,多通道激光雷达读出电路的研究具有重大意义。  本文针对多通道激光雷达系统集成化的应用需求,设计了一种高增益、高带宽、低噪声的32通道读出电路,并采用多通道
学位