基于轻量化网络的单帧图像动态范围增强方法研究与实现

来源 :山东大学 | 被引量 : 0次 | 上传用户:xingzhe1689
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于民用数字图像传感器动态范围的限制,设备常常难以同时记录自然场景中所有的动态范围,导致所得图像同时包含过曝光和欠曝光区域,这种图像被称为低动态范围(low dynamic range,LDR)图像。如今,科技的进步使得人们对图像质量要求越来越高,LDR图像已经逐渐不能满足要求,高动态范围(high dynamic range,HDR)成像技术应运而生,该技术通常使用多张不同曝光的LDR图像合成一张HDR图像。然而,现存的海量LDR图像通常不具备不同曝光的版本,如何将这些LDR图像转换成HDR图像从而提高它们的视觉质量成为了一个研究热点。从单张LDR图像生成相应HDR图像的算法常被称为逆色调映射算子(inverse tone mapping operators,iTMOs)。由于从LDR图像中恢复丢失的信息是一个典型的病态(ill-posed)问题,因此最近的 iTMOs 都使用复杂的卷积神经网络来实现从 LDR 图像生成HDR图像。然而这些方法需要很高的算力作为支撑,难以运行在手机等十分常用但计算资源有限的设备上,限制了它们的应用范围。有关感知研究表明,图像中的过曝光区域会极大地降低图像的感知质量。针对上述情况,本文设计了一个名为LiTMNet的轻量化神经网络,通过恢复LDR图像中过曝光区域的信息来重建出相应的HDR图像。LiTMNet采用编码器-解码器结构,同时使用跳跃连接将编码器的特征传输到同级的解码器单元上。LiTMNet包含了一个高效的上采样层,与传统的上采样层相比,该层不仅能够提升图像生成质量,而且能够有效地缩短网络运行时间。最终的HDR图像由网络预测和原LDR图像非线性地混合而成。定性和定量分析表明LiTMNet能够得到与当前最先进方法高度相似的结果,同时比之快37倍。LiTMNet能够被部署在移动设备上,实现从单张LDR图像端到端地生成HDR图像,扩展了 iTMOs的应用范围。考虑到目前主流手机通常配备千万像素级的图像传感器,如何处理高分辨率输入图像是目前以神经网络为核心的算法所普遍面临的难题,特别是在手机等计算资源有限的平台上该问题更加突出。为了解决这个问题,进一步提高LiTMNet的实用性,本文采用下采样-网络处理-引导上采样的方法,以LiTMNet为核心构建了一个适用于安卓平台的图像增强应用。为了解决过曝光图像用于引导上采样时出现的伪影问题,本文提出了一种高效的引导图生成方法。该应用可以在3秒内完成对1200万像素输入的处理,生成1200万像素的HDR图像,并经过色调映射(tonemapping)后显示在设备上。
其他文献
建设社会主义法治国家,人才是关键。法官作为司法审判的中立者,其职业能力和职业素养关系着我国司法公正能否实现,因此建设一支专业化法官队伍是我们当前人才建设的首要任务
协议作为网络安全技术研究的重要基础,应用于诸多场景如网络入侵检测,模糊测试等。其中入侵检测系统需要使用大量私有协议,然而缺乏协议的报文文档,协议逆向工程就无法对协议
本实验主要是利用白云鄂博含铌铁矿作为原料,先用氢气作为还原剂探讨同时脱掉硫、磷和铁的最佳条件,应用HSC6.0热力学软件研究氢气还原含铌铁矿粉过程可能发生的反应及反应的方向和反应能达到平衡的条件,采用正交实验确定了在氢气选择性还原的过程中不同还原温度、还原时间和通氢量的最优工况。制作的正交表是L16(43),四水平三因子,还原温度以10℃为间隔探讨了940970℃的变化;还原时间以0.5h为间隔探
21世纪是一个信息化的时代,作为信息交流重要载体的图像已经在人们生活发展的各行各业占据了重要的位置。图像质量的好坏直接关系着人们信息的交流和信息的获取,更影响着人们
FPGA因具备丰富的可编程资源而广泛使用于集成电路设计和异构计算领域,随着芯片设计技术的发展,其设计规模和复杂程度逐渐增加,同时也增大了验证工作的难度。需求验证和设计
航天器在服役过程中会周期性进出能够吸收太阳热辐射的光照区和处于深冷空间的阴影区。因此,航天器接收到的热流强度也会发生周期性的变化,这就会在航天器柔性结构中产生瞬态温度场。瞬态温度场不仅会使柔性结构发生较大变形,当其变化剧烈时,还可能会使柔性结构产生热致振动。热致振动同时会诱发航天器主体产生姿态扰动,从而使航天器无法完成既定任务。因此,对航天器结构热致振动的研究是十分有必要的。本文以受到太阳热冲击作
贿赂犯罪在我国是重点关注和严厉打击的对象,而谋利要件是对贿赂行为进行定罪量刑的重中之重。谋利要件在一定程度上使得贿赂行为的入罪难度变大,其自身的认定标准较为模糊且
经济迅速发展的今天,人们已经不单单只追求物质上的满足,对于精神文化的需求也日益增长,各地区及各大博物馆争相展开文化产品相关设计,并已取得丰硕的成果,中国文化创意产业发展劲头活力十足。与此同时,相对我国经济较为发达的地区相比,开封市虽拥有丰厚的文化底蕴但其文化创意产品设计发展十分落后,开封的文化纪念品多是些司空见惯、缺乏文化内涵的小商品。优秀的文化创意产品的诞生不仅对于一个地区文化传承有着重要的作用
本课题针对我国铌资源得不到合理利用,制取铌铁合金存在流程长、能耗大、铌品位低等问题,为了找到一种简单高效处理低品位铌铁矿、制备出铌铁合金的新工艺,为包头白云鄂博矿铌资源的综合利用及工业化探索出一条较为高效的新途径,对使用包头白云鄂博含铌铁矿粉制取铌铁合金进行了探究,提出了气基选择性还原——渣金熔分——铝热还原的实验方案。使用HSC6.0热力学分析软件对气基选择性还原阶段的反应进行可行性分析,气基选
研究了L-肉碱对海水小球藻的种群增长和光合色素合成的调控作用,为探索外源L-肉碱促进海水小球藻种群增长的机理提供理论支持。本试验以海水小球藻(Chlorella sp.)为研究对象,人工基础海水和f/2培养基为营养源,用0(对照)、5、50、100、200 mg/L的L-肉碱强化培养10 d,每天检测其种群密度,试验结束时收取全部海水小球藻样本并检测其种群增长,Fe、Mg元素含量,光合色素组成,色