基于特征融合与深度学习的语义分割算法研究

来源 :青岛理工大学 | 被引量 : 0次 | 上传用户:pearwj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
目前,图像语义分割广泛应用于车辆自动驾驶、机器人导航、遥感图像识别、医疗影像肿瘤检测等多个不同领域,潜移默化的影响着人们的生活习惯。图像语义分割是一个像素级的视觉任务,使用计算机通过训练学习到的模型对输入图像的每个像素点类别做出预测,并将图像中的各类别用它对应标注颜色分割出来。巨大的应用价值使得图像语义分割得到了广泛的关注,是当下机器视觉研究的一个热门方向。但在实际应用场景中,会出现对象边缘轮廓分割不准确,分割细节损失以及衔接部分信息损失等问题,这些情况已逐渐成为了图像理解的难关。对于这些现存的难点,提出了基于金字塔场景分析网络(Pyramid Scene Parsing Network,PSPNet)的改进结构,主要研究工作如下所述:(1)提出了一个基于PSPNet改进的PSPNet+算法。首先,在特征学习模块中将输入图在原残差网络(Residual Network,Res Net)的基础上通过在网络内部增加卷积、池化操作,进一步学习各个层次特征,将所学习到的多个低层次特征与高层次特征相加,得到新的具有更多空间位置信息的特征图;为得到丰富的上下文信息,利用PSPNet的金字塔池化结构,将特征图中全局上下文信息与不同尺度局部上下文信息相结合,进行卷积,得到最终预测图。仿真实验结果表明:所改进的方法在PASCAL VOC 2012测试集中平均交并比(Mean Intersection over Union,MIo U)达到78.5%,较基准算法提升了1.7%。对所提出的PSPNet+算法实施消融实验,分别对PSPNet原始网络结构与PSPNet+y3、PSPNet+y2+y3、PSPNet+这三种分别附加了不同的低层特征图的算法进行评估,结果表明:PSPNet的MIo U为76.8%,PSPNet+y3的MIo U为77.1%,PSPNet+y2+y3的MIo U为78.3%,PSPNet+的MIo U为78.5%。(2)对PSPNet+算法的消融实验结果使用柱状图进行可视化统计分析。分析结果表明:总体MIo U值呈上升态势,并且发现采用金字塔池化结构预测各类别结果具有相对稳定性,但是从各类别精度结果来看并非引入越多的较低层特征图信息结果会更加优异,同时也会带来部分噪声,影响精度表现。PSPNet+y2+y3到PSPNet+的精度提升仅为0.2%,为此改变这一支路,借鉴编码-解码思想,应用CONCAT跃层连接,直接的增加了解码器端的卷积深度,有助于低层次特征信息的保留。我们将这个对PSPNet+算法分析并改进的算法命名为PSPNet++。把通过PSPNet++算法得到的预测图上传到PASCAL VOC 2012测试集评估平台上显示精度结果为79.1%。较PSPNet精度提升2.3%,较PSPNet+提升0.6%。本文所提算法是基于PSPNet方法改进的端到端卷积神经网络算法,未经过任何的后处理操作步骤。经实验证明能够有效提升图像语义分割精度,对边缘轮廓分割较弱、衔接部分精度损失做到有效改善。随着算法和底层技术的多样性与先进性,要得到更加优异的实验结果仍需要进一步的实验探究。
其他文献
钢-混凝土组合梁在民用基础设施发达的国家普遍存在,这种结构形式能够最大程度上发挥钢材和混凝土两种建筑材料的优越性能。为了提高公路桥梁的行车舒适性和上部结构的连续性,连续组合结构一直是多跨桥梁的最佳选择。然而,在负弯矩作用下,多跨连续组合梁中支点由于混凝土板的开裂会导致截面刚度和使用寿命不断下降。当结构因各种原因发生破坏时,采用合适的材料和技术进行加固比拆除和重建更加经济和省时。CFRP(Carbo
增压压缩机是制氧行业中普遍使用的动力机械设备,在钢铁冶炼领域中发挥着重要作用。但是因其运行过程中产生的噪声级高、噪声源多、影响面宽等特点,使增压机成为了制氧厂房内主要噪声污染源,对增压机进行噪声治理刻不容缓。为此本文在增压机组噪声测试的基础上,分析了主要噪声源的特性,并结合消声技术和微穿孔吸声理论,设计了一种新型的微穿孔板复合式消声装置。其次,利用声传递矩阵法构建了复合式消声装置的声学模型,并对其
沿海地区是人类活动的重要场所,养育着全球近三分之一的人口。近年来经济和社会迅速发展,沿海地区人口日益增长,其生活和生产用水需求逐年上升,对地下水的开采量也因此增加,引起多地发生海水入侵现象。海水入侵已经成为全球范围的环境问题,严重威胁沿海地区地下水资源的开发利用,对居民用水安全和区域可持续发展造成不利影响。本文以某沿海地区为例,基于GQISWI、HFE-D和GALDIT对研究区海水入侵现状和脆弱性
地震是目前人类面临的主要自然灾害之一,能够带来巨大的人员伤亡和经济损失。为了减小损失,挽救人民的生命财产安全,需要在震后第一时间形成应急决策,开展救援工作,其关键是建立合适的快速评估方法来确定地震灾情的范围和程度。地震带来的损失大部分是由建筑结构的倒塌破坏造成的,所以评估预测建筑结构的破坏程度对救援工作的合理开展具有重大的指导意义。钢筋混凝土(RC)框架结构是目前城镇建筑结构中最常用的形式之一,其
在城市更新及产业结构调整的背景下,工业遗产因其所处的地理优势和历史、社会、艺术、科技价值吸引了社会各界的关注。创意产业的新兴,符合当前产业结构升级的趋势。工业遗产的低租金和开敞空间与文化创意产业的发展需求契合,创意产业园成为了工业遗产改造的主要模式之一。二者的结合不仅创造了巨大的经济效益与社会价值,而且也带来了一些经济、社会和环境问题,以致改造后的创意产业园使用效果差强人意。因此,本文采用使用后评
近些年来,随着汽车保有量的逐年递增,道路交通变得越来越拥堵,随之而来的是汽车发生交通事故的可能性不断提高。也因此汽车碰撞的安全性问题愈发受到人们的关注。在交通道路上同向正常行驶的两辆车,可能因为一车突然拐弯或变道,导致另一车避让不及而与之发生小角度重叠碰撞,甚至会导致撞击车辆发生侧翻。因此对两车小角度重叠碰撞的研究也就具有了重要的意义。在汽车的小角度重叠碰撞有两种比较典型的碰撞工况:一种是SUV与
随着纳米技术的逐渐成熟和应用,开发高效的纳米润滑添加剂已成为摩擦学领域中的重要研究方向之一,其中二维纳米金属硫化物因其特殊的纳米片状结构而受到研究者广泛的关注。本文中,通过水热合成法,以去离子水为溶剂成功制备了SnS2纳米片,并通过扫描电镜表征其表面结构,利用拉曼光谱、EDS、XPS能谱等手段分析其化学成分,考察了SnS2纳米片作为润滑添加剂加到PAO基础油中的分散性,探究了滑动速度、载荷及添加剂
近年来,季冻区冻融环境对工程建设的影响以及膨胀土边坡问题已引起国内外广泛关注。我国季冻区膨胀土分布广泛,随着对季冻区工程建设的增加,季冻区膨胀土边坡的灾害问题不断涌现,膨胀土边坡在季冻区冻融循环环境下的边坡变形机理成为当前亟待研究的课题之一。针对该课题,本文通过室内膨胀土边坡模型试验以及数值模拟来开展相关研究工作。本文将室内模型试验与数值模拟研究相结合,通过冻融循环作用下膨胀土边坡室内模型试验,对
硅橡胶是一种典型的介电弹性体(dielectric elastomer,DE),具有良好的弹性、柔顺性和较宽的温度耐受性,在电场作用下发生电致变形,响应时间快,当电场撤去能恢复到初始状态。由于其电致形变量较低,通常在硅橡胶中添加介电填料制备复合介电材料,来提高机电耦合效率。基于硅橡胶介电弹性体电致变形的工作原理,常被用来制作柔性驱动器、传感器等器件,在生物医学、传感探测、运输等领域有着广阔的前景。
在推行建筑节能的时代背景下,泡沫混凝土由于其良好的保温和隔热性能,逐渐被推广应用,并且其能够与大多数建筑材料很好的相容,强度也可根据实际工程需要进行调整,因此,泡沫混凝土的应用领域逐渐拓宽。但由于泡沫混凝土的制备工艺特殊,需要借助物理或化学方法引入气泡,使泡沫混凝土内部孔隙所占的体积较大,这也构成了泡沫混凝土的结构缺陷,导致泡沫混凝土极易吸水,进而影响其耐久性,缩短了泡沫混凝土的使用寿命。因此,提