光照不均匀场景单幅图像超分辨率重建方法研究

来源 :中国矿业大学 | 被引量 : 0次 | 上传用户:zhx35003
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
分辨率是影响图像质量的重要因素之一。随着信息技术的发展,人们逐渐提高了对于高质量图像的需求。单幅图像超分辨率(SISR)重建技术由于其成本低和应用灵活便捷等优势而被广泛关注。然而,光照不均匀场景作为人类生活的重要场景之一,常常导致拍摄的图像存在严重的光照问题,从而对SISR方法的性能造成不良影响。因此,研究光照不均匀场景的SISR重建方法对于非良好光照环境的高分辨率图像采集具有重要理论意义和实用价值。当前,面向光照不均匀场景SISR方法的研究较少。现有SISR方法的研究主要针对正常光照场景下的图像,它们因缺少光照增强先验知识而无法恢复颜色和照度信息,而低光照图像增强方法则无法重建丢失的高频细节信息。并且,在光照不均匀场景中,现有SISR方法缺少高效的低光照图像特征表达方式,显著变化的光照特征干扰高频细节信息的感知,导致重建图像的纹理模糊和颜色畸变。本文针对光照不均匀场景的SISR重建方法,围绕低光照图像和非均匀照度图像的研究对象从增强模型特征表达能力和感知能力出发,开展并取得以下研究和成果:(1)提出了基于双向一致的级联超分辨率重建方法。该方法先通过光照增强的预处理移除低光照影响,再利用下游超分辨率模块重建高分辨率图像。针对光照增强引入的未知退化信息,该研究构建了双向一致性学习机制,利用图像重建和退化的双向一致性联合监督图像重建网络的学习,从而进一步增强网络对于未知信息的感知。此外,增强循环残差单元通过交替计算和递归计算增强传统残差单元的特征表达能力。该研究通过光照增强和图像超分辨率模型的级联框架能够有效完成低光照图像的颜色照度和纹理细节的超分辨率重建。(2)提出了基于边缘保持和颜色恢复的端到端超分辨率重建方法。考虑到级联模型会引入未知退化信息,该研究构建了基于Retinex的端到端超分辨率模型,分解图像反射和照度分量并分别对它们进行上采样和光照增强,从而减少光照对于纹理感知的影响。并且,本文基于该模型设计了基于边缘保持和颜色恢复的图像超分辨率网络,通过卷积神经网络实现了图像分解及反射和照度分量的上采样,恢复高光照颜色和照度信息。此外,该网络通过融合重建的梯度特征进一步增强高频细节信息。该研究采用端到端的重建模型避免了级联模型的固有问题,并引入Retinex理论提高了光照和纹理重建的特征表达能力,从而抑制颜色畸变和提高纹理细节清晰度。(3)提出了面向非均匀照度的光照引导超分辨率重建方法。针对非均匀照度导致重建图像产生曝光和纹理退化的问题,该研究在光照分布的分析基础上构建了光照强度估计模块,并利用预测的多尺度光照特征引导超分辨率重建过程。并且,动态U型网络被构建用于图像超分辨率重建,不同深度的多分辨率编码特征和由粗到细的解码过程抑制了光照信息对纹理感知的干扰以及低光照噪声问题,门机制被引入来动态调节网络结构以适应多尺度超分辨率。此外,交叉融合模块进一步优化光照信息对编、解码特征的逐层引导。提出的光照引导交叉融合超分辨率U型网络提高了非均匀照度图像的超分辨率重建效果,抑制了过曝光问题,增强了模型光照鲁棒性。(4)提出了交叉域先验监督的零样本超分辨率重建方法。针对复杂场景中先验训练样本难以获取的问题,该研究构建了交叉域先验监督的零样本学习机制,利用现有的低光照增强模型和正常光照SISR模型的先验知识联合监督低光照SISR模型对于不同属性知识的学习。并且,基于多尺度通道Transformer的U型网络被构建用于低光照图像超分辨率重建,其中多尺度通道Transformer模块被设计用于融合和增强不同深度的多分辨率编码特征,从而增强高效通道特征的响应,提高重建图像的感知特征。该研究探索了低光照SISR模型的零样本学习方法,并有效重建了低光照图像的颜色光照信息和纹理细节信息。
其他文献
水是影响泥质软岩巷道安全稳定的重要因素之一,该类巷道若不能采取有效支护与控制措施,会导致围岩锚固结构整体失稳破坏从而诱发工程灾害。我国目前由地下水侵蚀围岩锚固结构引发的顶板事故仍较多,极大影响了煤矿安全生产,获取水作用下泥质软岩锚固结构承载机制十分关键。基于此,论文针对不同含水率与应力水平下泥岩锚固结构承载特性开展宏-细-微多尺度试验研究,揭示了水化损伤作用下泥岩锚固结构弱化失稳机制,并提出了泥质
学位
成分复杂的生活源污染质在土体内渗流的过程中,其有机成分在土体中不断降解,与土体间产生复杂的物理-化学、生物-化学反应,改变着土体的结构和性质。生活源有机污染质降解作用下污染土场地土体土工性质的时空演化规律,是生活源污染土场地科学评价与工程治理的基础和前提。本文采用现场勘测、室内土工试验、理论分析相结合的方法,首先划分了生活源污染土场地的空间结构,然后以葡萄糖为代表性生活源有机污染质可溶性单糖,测试
学位
随煤矿采深加大,地应力和地温逐渐增高,动静载荷与温度对煤岩体力学性质及稳定性影响越来越显著,深部煤炭资源开采过程中冲击地压危险性日趋严重,其发生、演化过程与煤岩体动力学性质及破坏过程密切相关。目前针对动静载与温度耦合作用下煤岩体冲击破坏动力学方面缺乏深入研究,动静载与温度耦合作用下煤岩体冲击动力学特征规律与损伤破坏机理不清。本文采用实验室实验、理论分析、数值模拟等方法,研究动静载与温度耦合作用下煤
学位
国有企业研究院作为国家科技实力的重要组成部分和企业科技创新的重要载体,大力提升自身科技创新创效水平既是建设科技强国的时代重任,也是保持行业竞争力、实现高质量发展的重要举措。文章以当前全球科技博弈与行业深入融合新形势为切入点,分析了创新与创效间的理想关系,梳理部分国内外研究院的发展历程及其在科技创新创效管理中的经验与教训。针对国有企业研究院在创新创效过程中所表现出的机制体制束缚、创新效果缺乏客观评价
期刊
2019年12月26日,中共中央办公厅、国务院办公厅发布《关于促进劳动力和人才社会性流动体制机制改革的意见》明确说明“合理、公正、畅通、有序的社会性流动,是经济持续健康发展的有力支撑,是社会和谐进步的重要标志,是实现人的全面发展的必然要求。”而职业流动是社会流动的突出表现形式,学术职业流动属于职业流动范畴,据此,学术职业者有序流动有其重要价值。关切时代诉求,以问题研究导向,对东北地区高校学术职业有
学位
煤炭是我国的主要能源,在“十四五”及今后一个时期,煤炭消费总量仍然很大。在“双碳”指标要求下,煤炭的品质压力将会持续增加。提高动力煤入洗率,能够有效提高燃烧效率,降低煤炭运输成本,促进煤炭行业节能降耗,已经成为行业共识。受煤炭采掘运输过程环保要求不断提高的约束,大量使用喷淋水导致原煤水分增加,使筛分效率大幅降低,进一步影响了本就较低的动力煤洗选经济效益,是煤炭生产企业对提高原煤入选率积极性不高的主
学位
自国家“十三五”开始,人工智能可以赋予安防系统任务更鲜明的选择和更完善的结果,目前已逐渐进入新的快车道。并从传统安防系统事发时的被动防御逐渐过渡到事发前的自主进行阻止和事发时自主报警的方向。随着经济的发展,国家有了更丰富的财力铺设范围更广、清晰度更高的视频监控摄像头,这些高清摄像头对于社会安全治安建设、城市平安建设、各相关部门信息化、卫生健康区域防护与溯源等领域都做出卓越贡献。特别是在疫情期间,以
学位
现代光学系统正朝着大口径、高精度以及高分辨率的方向发展,传统的加工装备在动态性能等方面尚存不足,难以适应当前大型光学镜面的加工需求。应用串联机器人进行大型光学镜面研抛作业又存在刚度、动态性能和定位精度等方面的不足。因此,将结构紧凑、刚度高、运动误差小的并联机构引入到光学镜面加工领域可一定程度上改善加工装备的工作性能。此外,为避免全并联机构工作空间小、运动耦合性强的缺点,提出了采用五自由度混联机器人
学位
进入新时代,网络已成为意识形态工作的主阵地和舆论斗争的主战场,网络与统一战线的关系也更加紧密。如何更加有效地开展网络统战工作,牢牢守好网络意识形态阵地,加强网络意识形态政治引领,以推动传统统战工作网络化、科学化发展,是新时代统一战线必须面对的重大课题。文章在对网络统战工作重要性认识不足、网络人士底数掌握不清、网络统战工作平台覆盖率不高、网络统战工作机制不顺畅不完善等问题进行分析的基础上,提出了提升
期刊
随着我国核工业的大力发展,积累了一定量的高水平放射性废物(简称高放废物),高放废物的安全处置对于生态环境安全及核能的可持续发展均具有重要意义。目前,国际上广泛接受的方法是深地质处置,即将高放废物放置在废物罐中,外围包裹着缓冲材料膨润土,然后将它们放置在地下500-1000米的围岩中,从而实现高放废物与生物圈的永久隔离。在高放废物处置库单元关闭初期,随着地下水的不断渗入,膨润土逐渐趋于饱和状态。由于
学位