面向底层视觉的硬件友好神经网络结构搜索

来源 :大连理工大学 | 被引量 : 0次 | 上传用户:csl721
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
雨、雾、光照不足等恶劣自然环境会降低各种成像设备的成像质量。为克服这些不利因素,人们在各种硬件平台上部署了图像去雨、去雾等底层视觉算法。现有方法通常只能针对特定底层视觉任务和特定硬件平台设计网络结构,设计门槛高且效率低下。神经网络搜索是一种可以自动设计网络结构的技术,但其本身计算代价大,且与底层视觉任务的结合需要重新设计搜索空间,工作量繁重。搜索过程中也缺乏有效手段兼顾硬件平台带来的各种限制。为解决上述问题,本文提出了一种面向底层视觉的硬件友好神经网络搜索框架。首先,本文提议建立回归模型来为预测不同硬件平台下的推理延迟、功耗等不易得硬件指标。回归模型不仅可以大大降低获得此类硬件指标的代价,还可以对搜索算法屏蔽硬件平台细节。其次,本文提出了收缩采样策略,可以大大加速权重共享类神经网络搜索算法,加速幅度可达2~3倍。而且,该采样策略还可以利用硬件约束来指导搜索过程,从而搜索出硬件友好的网络结构。最后,本文提出了一个适用于底层视觉任务的全面、大小适中、通用性强的选项集。大量实验表明,该选项集可以大大降低设计针对特定任务的搜索空间的成本。为验证提出的算法框架的有效性,本文首先对提出的收缩采样策略和面向底层视觉任务的选项集进行了消融实验,验证了各自的作用。接下来,本文在低光图像增强、图像去雨两个特定底层视觉任务上,分别考虑推理延迟和模型参数量两个硬件指标,考虑CPU和GPU两个硬件平台,完整地应用了本文提出的算法框架。并将搜索到的网络结构和各自任务的先进算法进行了定性和定量的对比。实验结果证明,本文算法搜得的网络结构在两个任务上均在满足硬件约束的前提下取得了领先的增强效果。
其他文献
恶劣环境下的底层视觉旨在解决因不利天气,遮挡模糊等因素造成的图像退化问题,是支撑真实场景下语义感知的关键技术,广泛应用于无人驾驶,交通安防,工业生产等领域。其中图像融合与视觉增强是解决恶劣环境下环境感知的主流手段。然而现有方案面临两方面挑战:(1)提升图像融合计算效率:基于深度学习的融合方案依赖工程化经验,不可避免地引起结构冗余等问题导致计算效率低,缺乏对模态特征针对性处理以致融合性能不佳;(2)
学位
黄河三角洲地区滨海盐碱土地面积广阔,且盐碱含量高、土壤养分低,严重影响了该区域内农业尤其是经济作物的种植业发展。施用微生物制剂是盐碱地改良的有效措施,而木霉可以改善土壤环境、促进植物生长,且环境友好,是制备菌肥菌剂的理想菌株。中华枸杞(Lycium chinense)耐盐耐涝能力强,经济价值高,适宜在滨海盐碱地推广种植。研究木霉对枸杞抗盐能力的影响机制,可促进枸杞在盐渍土壤中生存生长,为滨海盐碱地
学位
口岸病原微生物多指入境口岸大宗货物、压舱水、动物源性样本、土壤、人员携带等样本中的病原微生物。近年来,传染病的暴发越发频繁,国家间贸易往来的日益增加给传染病的传播提供了途径,给生命健康和财产安全带来极大的威胁。口岸作为防控病原微生物的第一道关卡,做好口岸检疫工作尤为重要,但是目前口岸检疫工作存在以下问题:一方面缺少口岸病原微生物相关的数据库,大量重要监测数据整合率低,浪费数据资源,另一方面全球土壤
学位
受复杂照明条件以及拍摄设备的影响,从现实环境中捕获的低光图像往往呈现出亮度偏暗,对比度偏弱,噪声较多,边缘信息较差,细节缺失的特点,严重影响了图像的可视性。提高低光图像的质量在许多图像处理和多媒体应用中扮演着非常重要的角色。光照估计一直是低光图像增强问题中的一大难点。很多现有深度学习方法缺乏对光照的有效先验约束,导致估计出的光照无法反应场景的真实结构,进而影响了恢复结果的质量。此外,一些模型采用“
学位
大部分深度领域自适应方法度量的是源域和目标域的整体数据分布,但是样本之间不同的特征表征表明了样本在数据分布度量中的贡献是不同的。正是缺少了对样本差异性的衡量,才会导致源域和目标域的整体数据分布无法进行细粒度的对齐。另外,无论是整体分布对齐还是细粒度对齐都是针对图片整体特征,但整体特征中存在的不同干扰特征也是样本差异性的表现之一,如:杂乱背景。在如此情况下,强制对齐样本的整体特征必然会导致严重的负面
学位
浮游原生生物作为浮游真核微生物的主要组成成分,具有高度的物种多样性,同时也是海洋生产力的主要贡献者和生源要素循环的重要驱动者之一。纤毛虫作为特化程度最高的原生生物,能够快速适应周围环境的变化,并在浮游生态系统中发挥着独特的生态功能。近岸水体与人类活动密切相关,其中的原生生物会受到人为因素和自然因素的双重影响,从而表现出一定的群落组成和时空分布模式。然而莱州湾近岸水体的原生生物多样性以及群落组成和季
学位
工业革命以来,随着全球经济蓬勃发展以及农业人口数量的日益扩大,人们对化肥的过度利用及不合理的耕作方式使土壤盐渍化程度越来越严重。土壤盐渍化已成为影响作物产量、品质以及制约农业发展的重要因素之一。藜麦(Chenopodium quinoa Willd.)具有独特的营养价值且具有很强的抗逆性与适应性,在土壤盐渍化加剧这一背景下使得其藜麦现已作为一种盐生植物模型被广泛研究,随着藜麦高质量基因组的发布,越
学位
干旱作为限制植物生长发育最重要的非生物胁迫之一,通常会引起植物生长发育、形态结构、生理生化、基因表达等一系列的变化,其对植物造成的生长减缓,远远高于盐、高温等其他非生物胁迫。北沙参为伞形科珊瑚菜属珊瑚菜(Glehnia littoralis Fr.Schmidt ex Miq.)的干燥根,属临床常用中药,国内多分布于山东、内蒙古、河北等地。虽然珊瑚菜的药用价值很高,但是野生资源衰竭,被列为国家二级
学位
随着三维打印技术的广泛应用,打印模型变得更加复杂和多样化,对打印精度的要求也逐渐提高。作为三维打印流程中的重要部分,路径规划的精度影响着整体打印精度。复杂壳体模型包含大量难以规划的复杂几何结构。由于传统的路径规划方法及打印过程无法满足复杂几何结构的高精度打印要求,复杂壳体模型打印结果质量较差、精度较低的问题需要有效解决。针对复杂几何结构的传统路径规划中存在的局部路径质量问题,本文提出一种自适应路径
学位
高性能的有监督模型需要获取大量的高质量标注数据,且模型只能识别训练中见过的类别。零样本学习将现有模型学习到的知识迁移到未见类别上,解决了监督学习缺少标注数据和模型复用性低的困境。由于缺少未见类图像,零样本学习需要引入额外的语义信息监督才能正确识别未见类,但这同时也导致了域漂移和模态间隔问题。本文聚焦零样本学习中的域漂移和模态间隔问题,提出了两种基于语义引导的零样本学习方法,具体研究内容如下:(1)
学位