基于多模态注意力残差组的图像去雾技术与应用研究

来源 :延边大学 | 被引量 : 0次 | 上传用户:gaoliksk
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在大雾天气下,户外成像设备由于受到大气中液体水珠构成的可见聚合体影响,导致采集到的图像出现色彩保真度下降和内容信息丢失等图像质量退化问题。降质图像不仅会影响人类视觉系统对图像的感知能力,而且会制约检测、识别等上层计算机视觉系统在雾天环境下的工作性能。尽管基于深度学习的图像去雾方法取得了一定的去雾效果,但是仍然存在图像中非均匀雾无法完全去除、去雾后的图像出现颜色失真和纹理细节模糊等问题。因此,研究如何从雾天降质图像中恢复出高质量的去雾图像,进而提高图像的整体观感和上层计算机视觉系统在雾天的工作性能是当前去雾领域的工作重点,具有重大的意义。本文提出了一种基于多模态注意力残差组的图像去雾模型用于图像去雾任务。首先,本文提出了一种基于多模态注意力机制的残差组模块。残差组能够避免特征信息在传递过程中的信息损失,多模态注意力机制通过对不同通道和像素上的雾特征赋予不同的权重,使模型重点关注雾浓度较高的区域。两者结合能够提高模型对图像中非均匀雾的特征提取能力,减少去雾后图像出现的残留雾现象。其次,考虑到去雾后的图像存在颜色、亮度、对比度和内部结构性信息与清晰的标签图像不一致的问题。引入多尺度结构相似性损失函数作为去雾后图像的结构偏移控制项,引入平均绝对误差损失函数作为去雾后图像的颜色偏移控制项。将两种损失函数结合后参与模型训练,有效提高了去雾后图像的视觉效果。最后,为了解决图像去雾后出现的纹理细节模糊问题,使用亚像素卷积模块作为模型的主要上采样模块,通过将图像的像素重新组合的方式进行上采样,避免了填充额外像素对图像质量的干扰,提高了去雾后图像的纹理细节清晰度。经过实验验证,本文提出的去雾方法可以有效恢复真实有雾图像中的内容信息。在合成的有雾图像数据集SOTS上的峰值信噪比达到了34.25d B,结构相似性达到了0.985,去雾后的图像内容信息完整且没有出现模糊伪影和颜色失真等现象。在雾天场景下的文本检测任务和语义分割任务中,使用本文方法对有雾图像进行预处理,可以显著提高模型的检测和分割性能。
其他文献
场景文本检测与识别技术是计算机视觉任务的分支,同样也是计算机视觉中的热点课题。该技术在卡证识别、无人驾驶导航、图像内容检索等方面具有广泛的应用前景。自然场景中的文本表现形式丰富多样,字符种类繁多,文本的大小、颜色、长宽比不同,并且有严重的背景干扰问题。如何从自然场景中快速准确地检测出文本区域并对其准确识别,仍是该领域亟待解决的问题。本学位论文通过深入研究分析场景文本检测与识别方法,对经典的文本检测
学位
自1981年海合会成立以来,中国就与海合会国家积极进行贸易往来。海合会成员国均为石油输出国,拥有极其雄厚的石油资源。中国常年进口石油,是名副其实的石油进口大国。2019年中国进口海合会国家石油资源总量为890.89亿美元,占总进口额80.2%,可见中国对海合会国家石油的依存度极高。2022年国际政治局面动荡,引发全球供应危机,导致全球原油价格高涨,中国的汽油价格也深受影响。因此为了中国经济的长效发
学位
植物种子发育起始于双受精,从双受精到种子成熟的过程中,众多基因参与了种子发育的遗传调控。所以,研究与种子发育有关的基因,揭示其作用机理,可以为育种和产量提供理论支持。PPR蛋白(Pentatricopeptide Repeat Proteins)广泛存在于真核生物中,在植物生长发育和胚胎发生过程中发挥着至关重要的作用。PPR蛋白通常由大约35个氨基酸的PPR基序串联重复而成。根据基序氨基酸数目和序
学位
新中国成立后,我国政府会计采用的是预算会计。由于我国市场经济的快速发展,加上政府职能的转变,采用收付实现制的预算会计已经不能满足行政事业单位会计工作的需要,必须进行改革。财政部于2017年颁布了《政府会计制度——行政事业单位会计科目和报表》(财会[2017]25号),自2019年1月1日开始实施。新的政府会计制度采用权责发生制和收付实现制并行的会计核算模式,是当前中国政府会计改革的一个重大革新,它
学位
糖类化合物是最丰富的天然有机化合物,具有结构多样性。它们存在于不同生物的所有类型的细胞表面,哺乳动物细胞上的糖类化合物参与许多生物学和病理学过程,包括体内稳态、细胞间相互作用、细胞迁移、发育、炎症、免疫学和癌症转移等。通过糖基转移酶或糖苷酶将糖类基团转移到蛋白质或其他化合物上形成糖苷键的过程被称为糖基化修饰,形成糖苷键的各种单糖结构单元以及各种立体和区域化学作用,使糖类化合物的线性和分支结构变得复
学位
近年来,甲状腺结节的发病率不断上升,严重危害着人们的身体健康。超声诊断是甲状腺结节临床检测的首选方法,具有低成本、相对安全、非侵入性及实时显示等特点,但超声影像与自然场景下的图像不同,存在对比度低、清晰度差、结节特征不明显、早期结节难发现等问题,限制了检测精度的提升。因此,本文针对上述问题,在研究甲状腺结节特征提取机理的基础上,提出了一种适用于甲状腺结节超声影像的检测方法。首先,本文采用了图像锐化
学位
玉米是我国重要的粮食作物之一,在粮食安全、畜牧业、工业等领域发挥着重要的作用。玉米籽粒胚和胚乳的发育对于玉米产量的提高以及内部蛋白的营养物质有重要的影响。研究玉米籽粒的发育过程对于增加玉米产量及改善人们的食物结构非常重要。Pentatricopeptide Repeat(PPR)蛋白是一类核基因编码的、主要定位于线粒体和叶绿体等细胞器的RNA结合蛋白,参与转录后的RNA编辑、内含子剪接以及RNA的
学位
新冠疫情爆发、贸易保护主义抬头以及全球价值链重构背景下进入生效阶段的RCEP涵盖了对成员国的投资自由化和便利化的各个方面,为区域内各国的投资合作提供了新的发展契机。而且对外直接投资对中国来讲也是“走出去”战略的重要组成部分,是培育国际竞争新优势的一个主要因素。因此,研究RCEP国家投资便利化水平对中国对外直接投资的影响,对提升中国投资效率、促进区域内投资合作高质量发展具有一定的现实意义。本文在梳理
学位
目的:血管性血友病因子裂解酶(ADAMTS13)在血栓性血小板减少性紫癜(TTP)的发病过程中起着重要作用。ADAMTS13的功能异常可能会导致TTP的发生,但ADAMTS13在TTP中的作用机制尚不明确,因此本实验研究了ADAMTS13中的间隔区(Spacer)结构域在血管性血友病因子(v WF)裂解过程中的生物学功能,为TTP发病机制的研究提供理论依据。方法:1.将ADAMTS13 Space
学位
目的:初步探讨千金藤素在前列腺癌恶性演进中的生物学功能及分子机制:1)探究千金藤素对前列腺癌细胞增殖、转移的生物学功能影响;2)探讨PI3K/AKT在前列腺癌细胞中所涉及的分子机制。材料与方法:体外实验:1)采用CCK-8实验检测不同浓度(0、5、10、20μM)的千金藤素对前列腺癌细胞DU145的增殖影响;2)通过免疫荧光实验测定千金藤素对上皮间充质转化(epith elial-mesenchy
学位