基于动态卷积网络的图像超分辨率增强算法研究

来源 :太原理工大学 | 被引量 : 0次 | 上传用户:js_netbit
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像超分辨率增强算法通过增大图像像素密度对低分辨率图像进行增强,得到相应的高分辨率图像,提升图像清晰度和高频信息量。图像超分辨率增强算法在公共安全、医疗卫生、航空航天和影音娱乐等领域广泛应用,高质量的高分辨率图像不仅提升了图像视觉效果,还有利于计算机对图像场景信息的进一步理解与处理。图像超分辨率增强算法的精度与速度是影响图像超分辨率增强在实际应用中的两个重要指标。当前,基于深度学习的方法较传统方法取得了显著的性能优势。现有基于深度学习的方法大多采用固定参数的静态神经网络,模型表示力有限,图像超分辨率增强效果有待提升。并且,现有方法通过构造大容量网络在追求模型高精度的同时不可避免地带来了参数冗余问题,制约了其在移动端的应用。针对以上两点问题,本文深入研究了基于动态神经网络的图像超分辨率增强算法和相关模型压缩技术。本文主要的工作和创新点如下:(1)针对静态神经网络表示力不足的问题,提出一种基于语义特征先验的动态图像超分辨率增强算法。静态神经网络采取固定参数建模高低分辨率图像对之间的映射关系,忽视了不同图像映射规律的差异性,超分辨率增强结果不准确。为此,本文在静态神经网络中引入语义特征先验,其能根据图像的不同语义信息自适应调整网络参数,提升了网络的灵活性和建模能力,获得更为生动,准确的超分辨率图像。本文首先对语义分割图、语义概率图和语义特征进行了对比分析和实验,确定以语义特征作为先验信息动态调节模型参数。然后将本文算法与静态模型算法进行对比,在大量数据集上验证了本文算法的先进性和优越性。(2)针对动态网络中单一先验信息的不确定性,提出一种基于多层级特征的动态图像超分辨率增强方法。目前大多数动态图像超分辨率增强网络依赖的先验信息过分单一,单一的先验信息对不同类型高、低分辨率图像的区分力不足,动态网络的自适应性有待提升。因此,本文将卷积神经网络的多层级特征作为先验信息,利用多层级特征对图像描述的互补性,提高动态网络的自适应性、提升图像超分辨率结果的准确性。本文首先实验比较了多层级特征的不同组合方式并选出最优组合方法。然后将本文算法和基于单一特征先验的算法进行对比,实验证明多层级特征先验在应对复杂场景图像超分辨率增强任务时增强效果更好。最后实验证明本文所提的基于多层级特征的模型动态调节方法可灵活应用于任一现有静态模型,提升静态模型的自适应性和超分辨率结果准确性。(3)针对超分辨率模型过大和运算复杂的问题,采用模型剪枝和知识蒸馏的方法对图像超分辨率网络进行压缩和优化。现有图像超分辨率方法利用大容量网络在追求模型高精度的同时不可避免地带来了参数冗余问题,对硬件存储空间与算力提出较高的要求,制约了其在移动端的应用。本文利用模型剪枝的方法对模型进行初步压缩,减少模型参数、加快计算速度。为提升小模型的增强效果,本文通过知识蒸馏的方法对小模型进行进一步优化,使得压缩后的模型在超分辨率增强效果不明显下降的前提下,相比压缩前的模型参数量大幅减少、计算速度明显提升。最后,本文通过可视化界面工具Py Qt设计了简单易操作的图像超分辨率增强应用,提供了方便的图像超分辨率服务,为模型的进一步落地优化提供帮助。
其他文献
本文研究内容来源于山西省科技重大专项项目“中低压直流配电网关键技术(20181102028)”子课题5“中低压交直流配用电系统计量和保护关键技术研究及设备研制”和国网山西省电力公司科技项目“中低压直流配电网调控、保护和安全用电关键技术及应用(520530200014)”。柔性直流配电系统具有换流环节少、控制灵活、运行损耗低、系统可靠性高、传输容量大、供电质量好、有利于光伏等清洁能源及直流负荷灵活高
学位
我国是世界上第一农业大国,提高产值、减少损失是发展农业、保障民生的重要举措。近年来,随着国民经济的提高,人民对美好生活的要求日益增长,消费观念不断变化,使得对原产地新鲜果蔬的需求也逐步提升。但由于我国冷链物流起步较晚,存在体系不完善、相应法规制度缺失、技术标准不健全等问题,导致冷链产品在运输过程中腐烂率较高。因此设计正规化、专业化、系统化的冷链物流环境分析决策体系,对降低冷链过程食品损耗、提高冷链
学位
随着科学技术的发展,智能化水平越来越高,人们对于充电技术提出了更高的要求,无线电能传输技术凭借着其独有的充电特性,受到人们的喜爱。无线电能传输技术不受导线的束缚,使得该技术可以在更多的场合里得到应用,并且该技术在使用起来更加安全、灵活。本文针对各种中小功率用电设备,设计了一套百瓦级无线电能传输系统,并针对系统在运行过程中,存在系统参数变化、传输线圈偏移、负载变化等情况,这些因素都会使得系统的谐振频
学位
21世纪以来,南极冰盖表面融化显著,实时探测南极冰盖的物质平衡对监测全球海平面变化具有重要意义。目前南极冰盖的探测方式仍以卫星遥感为主,难以实现小范围内现场数据的精准探测,随着无人机应用领域的不断拓宽,可搭载多种载荷的无人机为解决上述难题提供了一种新方法。本课题组以南极冰盖物质平衡主要参数(风速风向、气温气压、降雪量)的长期无人化监测为核心目标,提出通过在南极中山站至昆仑站冰盖断面上投放多个舱式无
学位
开发可再生能源在实现我国碳达峰、碳中和目标的进程中发挥着至关重要的作用。而风电作为主力核心又得到了广泛关注。作为风电场的主流机型,双馈感应发电机(Doubly-fed Induction Generator,DFIG)具有有功、无功独立调节,成本较低等优势,故应用范围较广。但当电网电压不平衡时,发电机的输出功率以及电磁转矩等电气量会发生振荡,且幅值较大,影响发电机稳定运行。因此,针对不平衡电网下D
学位
随着城市化进程的不断加快,机动车保有量迅猛增长,交通拥堵问题日趋严重,传统的单个交叉口信号控制方式或干线信号协调控制方式很难及时缓解交通拥堵,学者们开始转向区域信号协调控制领域展开研究。由于城市交叉口群是区域交通信号协调控制领域的一个热点研究方向,论文以城市交叉口群为研究对象,首先依据交通关联特性在中大型城市路网内划分得到多个交叉口群,接着识别出每一个交叉口群内包含不同数目交叉口的关键路径,为后续
学位
气溶胶中颗粒物(PM)测量技术在大气监测、洁净室技术以及移动源排放等领域发挥着重要作用。我国于2016年颁布的《轻型汽车污染物排放限值及测量方法(中国第六阶段)》中明确规定了移动源排气中粒径超过23nm的颗粒数量(PN)浓度的限值要求。针对纳米级颗粒PN浓度在线测量技术,传统光散射法、重量法等均不再适用,而电学方法,例如:法拉第杯气溶胶静电计(FCAE),受检测原理影响导致其测量浓度下限较高,无法
学位
计算机辅助医疗是计算机行业与医疗行业发展融合的产物,图像处理技术的介入为医学诊疗带来了极大的便利。眼科医学中,通过动态观察眼角膜神经的分布与形状能够一定程度上判断角膜神经病变的严重程度。活体共聚焦显微镜(In Vivo Confocal Microscopy,IVCM)能够实现对眼角膜神经纤维的观察,是一种简单、快速、客观、无创地完成小神经纤维病变筛查的检测手段,因此眼科医学中常使用IVCM对眼角
学位
作为视觉同步定位与地图重建中的关键技术,视觉里程计(Visual Odometry,VO)通过对图像序列进行分析,感知场景的深度信息并估计自身运动位姿,广泛应用于先进驾驶辅助系统、无人驾驶、虚拟现实以及移动机器人等智能应用领域,对于推进交通智能化意义非凡。尽管研究人员已经开发出多种定位技术,如激光雷达里程计、轮式里程计、全球定位系统等,但车辆驾驶环境下的视觉自主定位仍是一个极具挑战性的问题,许多因
学位
目前,移动机器人已开始应用于农业生产、安防巡检、仓储物流等领域,为人们的生产和生活带来了极大便利。而路径规划是移动机器人完成作业任务的基础与关键,路径规划成功与否决定了移动机器人完成作业的效率。A*算法是最常用的移动机器人路径规划算法之一,可能由于传感器或环境信息发生改变使机器人自身定位出现误差,从而带来路径规划偏差。且单机器人路径规划算法存在无法适应复杂多变的环境、优化目标较为单一的问题,导致机
学位