基于深度学习的低照度下含近红外RGB图像颜色复原

来源 :云南师范大学 | 被引量 : 0次 | 上传用户:sl604
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,在低照度条件下利用近红外技术来提高图像的成像效果成为研究的热点,其中利用去除红外滤波片的传统RGB成像系统捕获的含有近红外波段的RGB(RGB_NIR)图像是研究的内容之一。然而,RGB_NIR图像会使可见光波段和近红外波段重叠致使图像颜色失真偏粉色。对RGB_NIR图像进行颜色复原处理成了获得低照度下高质量RGB图像的重点。但是传统插值,矩阵变换等图像颜色复原处理方式效果并不理想。而随着深度学习的出现,给有效的解决低照度下RGB_NIR图像颜色复原问题带来了新的希望,由于深度学习需要大量的训练样本数据,以及国内外包含低照度条件的RGB_NIR图像数据集的缺乏,本文首先构建了RGB_NIR图像数据集。之后分别设计了基于卷积神经网路的算法模型用于解决低照度下RGB_NIR图像颜色复原任务和提出了Cycle GAN网络模型用于上述任务的可行性,具体工作包括:(1)利用自己搭建的采集平台采集构建了RGB_NIR图像数据集。搭建的平台采用Sony385机芯,平台上软件控制拍摄照片的参数,数据集是在满月无风无云条件下采集四种模式:在IR-cut滤光片关闭条件下的低照度彩色RGB图像和辅助可见波段光源的彩色RGB图像,以及在IR滤光片打开条件下的RGB_NIR图像和RGB_NIR的灰度图像。图像数据集包含130个不同场景,总计520幅图像。(2)提出了一种新的基于卷积神经网络的算法模型AEDNet实现低照度下RGB_NIR图像的复原问题。设计思路综合了自编码器网络结构和稠密块网络思想,在此基础上进一步将多任务的损失函数策略引用到含有近红外彩色图像颜色复原问题中。最后也针对提出的AEDNet模型和损失函数策略进行了相关实验评估。实验用到训练集图像100幅,测试集图像30幅。并对得到的实验结果做了定性定量的对比分析。结果表明,提出的AEDNet网络模型针对于低照度下RGB_NIR图像的颜色复原问题能够得到令人满意的效果。(3)研究了生成对抗网络的变种Cycle GAN实现低照度下RGB_NIR图像颜色复原问题。在理论上进行了相关证明,并从视觉效果上同两种最新的CDNet和ACGAN两种网络模型进行了实验比较,其中训练集图像110幅,测试集图像20幅,并对得到的实验结果做了定性定量的对比分析。实验结果表明,Cycle GAN的整体复原效果要优于其他两种网络模型。
其他文献
目前,国内创新高科技产业链取得了迅猛发展,其中电力能源的健康发展起到了保驾护航的作用,尤其是新能源电站电气设备逐渐成为新时代发展的大趋势。因此,有必要高度关注新能源电站电气设备的运维检方面,尤其要重视电气设备的巡检与排查强度,从而保证电力及其社会各行各业的平稳发展,提升电力运转效率,满足大众日常生活与生产用电需求。在面临新能源电站电气设备运维检存在的问题时,相关维保人员要加强自身素养,主动提出运行
期刊
随着图像传感器CCD/COMS技术的进步,低照度条件下如何利用普通三通道相机获取真彩色图像成为该领域的研究课题。颜色是由自然物体表面的光谱反射率和照明光源决定,目前科研人员对正常照明条件下估计光源以及估计物体表面光谱反射率做了大量研究。本论文探索低照度条件下普通三通道相机的颜色复原方法,重点建立了包括满月月光自然低照度和人造光源的光源光谱以及自然植物光谱反射率数据库,在此基础上研究了利用数据库得到
学位
学位
随着经济的快速发展,资本市场上开始涌现越来越多的上市公司,这些公司对经济的发展起着至关重要的作用。目前我国的上市公司中股权集中的现象非常普遍,股权集中往往会使得大股东掌握公司的实际控制权,并利用该权利对上市公司实施利益侵占,从而为自身谋利。由于大部分的上市公司治理机制、监管机制等存在大量问题,并且当前我国相关的法律法规也不完善,使得大股东能够轻易地对上市公司实施掏空行为,而这些掏空行为发生频率越来
学位
自2015年国家提出供给侧改革后,处于行业下行形势中的钢铁企业纷纷面临着“去产能、去库存、去杠杆、降成本、补短板”的转型压力。2017年,国家提出在供给侧结构改革的主线下推动实体经济与数字经济的融合发展,推动制造业加速向数字化、网络化、智能化方向发展。众多钢铁企业开始选择进行数字化转型。在数字化转型过程中,财务数字化是其中的一个重要部分。众多企业选择建立财务共享中心作为财务数字化转型的突破口。尤其
学位
伴随现代社会视觉成像技术的飞速发展,三维成像技术也获得了不断地突破,在各个领域如工业生产、图像识别和智能化制造等有着广泛的应用。其中结构光三维成像技术通过向物体投影包含某种调制信息的结构光,通过成像系统获得物体表面的光强图像,再根据光学三角测量法获得物体的三维信息。结构光三维成像有着较高的空间分辨率和检测准确度,并具备较好的实时三维成像性能。油画作为书画类艺术品中的一大分支,其表面具有立体感强及笔
学位
学位
近年来我国市场进入到飞速发展当中,股份回购数量和金额更是呈现井喷的状况,相关理论研究更是不断跟西方靠齐,其中我国研究股份回购的动因和市场效应具有重要意义。但是,在我国股份回购逐渐发展创新的同时,有关一些不可忽视的问题也开始显现而出。那就是象征性的股份回购开始频发。所谓象征性股份回购,指的是公司为了隐藏其他动因而进行股份回购,最终股份回购的金额远远低于计划公布的回购,国家既要鼓励公司积极进行股份回购
学位
近年来,我国资本市场进一步发展,股份回购的制度进一步完善,伴随着《中华人民共和国公司法》放宽对企业股份回购的限制,选择开展股份回购的企业规模不断壮大。2020年2月底开始,受新冠肺炎疫情影响,国内消费和生产在短期内都受到一定冲击。在这个节点,多家公司开展股份回购。美的集团股份有限公司实施了将近27亿规模的股份回购,是当年企业股份回购规模最大的公司之一。本文基于美的集团这一案例,在梳理国内外相关文献
学位
当前,世界百年未有之大变局加速演进,全球范围内,风险点和动荡源明显增加,我国发展所面临的外部环境日趋复杂严峻,突发公共事件发生的概率大大提高。受此影响,一些经营受外部影响较大行业的企业面临的经营风险在加大,由于普遍缺乏风险管理意识,很多企业往往在受到突发公共事件影响后,业务受到巨大阻碍,深陷财务危机。如:2019年末爆发的新冠肺炎疫情,导致疫情在全世界范围内肆虐,各国政府纷纷出台相应的疫情管控措施
学位