弱监督下基于对抗互补注意力机制和分层双线性池化的细粒度图像识别

来源 :江西师范大学 | 被引量 : 0次 | 上传用户:huangwei0541
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着深度学习技术的广泛发展,细粒度图像识别技术成为当前计算机视觉领域研究的热点。细粒度图像识别的方法可以分为需要人工标注包围框或标注点的强监督方法、不需要任何标注信息的无监督方法和只需要图像级别标注的弱监督方法。弱监督的好处在于它不仅可以大大节省人力、财力,而且还可以达到很好的识别精度。因此,本文研究弱监督下的细粒度图像识别。研究弱监督下的细粒度图像识别需要提取出图像细微的判别性特征,一些常用的方法是直接利用卷积神经网络或者基于视觉注意力机制的方法提取图像的判别性特征,这种方法往往只能提取到图像一些主要显著的判别性特征,而不能学习到其他次要显著的判别性特征。当两个图像被提取出的主要显著的判别性特征非常相似时,仅仅依靠主要显著的判别性特征是不够的,此时次要显著的判别性特征显得极为重要。我们尝试使用一种基于对抗互补注意力机制的方式,它不仅可以提取出图像主要显著的判别性特征而且还可以提取出图像次要显著的判别性特征,此方法主要包含两个分类器,其中分类器A用来学习物体一些特别显著的判别性特征,分类器B将分类器A学习到的这些判别性特征擦除掉,然后再去学习下一个判别性特征,即相对于分类器A学到的次要显著的判别性特征。两个分类器以一种对抗互补的方式迭代学习,直到网络训练到收敛为止。实验结果表明,这种基于对抗互补注意力的细粒度图像识别方法可以提升细粒度图像识别的准确率。研究弱监督下的细粒度图像识别还需要融合不同网络层之间的判别性特征。当前研究弱监督下的细粒度图像识别方法往往在提取出卷积神经网络高层的语义信息之后便直接进行类别的预测,但其却忽略了卷积神经网络不同网络层提取出的特征之间具有一定的语义相关性。因此,本文尝试使用一种基于对抗互补注意力机制和分层双线性池化的方法,分层双线性池化可以将不同层之间的特征进行融合,加强图像特征之间的相关性,促使网络学习到的显著性区域更加具有代表性,从而提升分类网络的性能。在本文中,我们主要是在使用对抗互补注意力机制提取到图像高层的判别性特征之后,又提取了相同尺度下不同层之间的判别性特征,然后再将这些不同层的判别性特征两两之间进行双线性池化,即将不同层之间的判别性特征进行融合,增强图像的表示能力,用以提升弱监督下细粒度图像识别的能力。实验结果表明,这种基于对抗互补注意力机制和分层双线性池化的细粒度图像识别方法具有一定的竞争性。
其他文献
水葫芦是一种环境适应能力极强的水生生物质,生长速度极快,水葫芦的高效利用现已成为我国淡水体系保护面临的重要课题之一。水葫芦具有较高的氢碳比,微波热解有可能成为将水
闽楠作为珍贵大径材用材树种,面临着天然林遭受大面积破坏,人工林生长缓慢、林分空间结构不合理等问题。与此同时,随着经济发展的需要,市场对中、高档大径材的需求在不断增加
在水土流失治理过程中,水土保持技术发挥了重要的作用,水土保持技术的实施,不仅显著改善了生态环境,而且对当地的经济、社会发展都产生了较大影响。因此,对于水土保持技术及
地震由于其突发性和破坏性,常常会对结构和设施造成破坏,进而带来经济损失。供水系统是城市得以正常运转必不可少的基础设施之一,随着科技的进步与城市用水需求的增加,供水系
杉木是我国南方最重要的用材树种之一,为了探究混交林内杉木与马尾松的生长特性及其在养分吸收方面的竞争与利用关系,本文以湖南省会同县高椅林场11a杉木与马尾松混交林为实
由于化石能源每年的消耗量巨大,许多科研机构开始走上探索新能源之路,提出了生物质能源代替化石能源的想法。我国秸秆能源的存储量十分丰富。秸秆气化技术可以将秸秆能源转化
目的:1.本项研究建立赫依热症KM小鼠模型及其诊断标准。2.分析阿嘎如-15散对赫依热症的药物疗效。方法:通过小鼠腹腔注射0.05mL10%水合氯醛浅麻后鼻腔滴注肺炎链球菌中浓度(3
随着超导技术的不断发展,第二代高温超导带材在性能和制备工艺上取得了巨大的进步,并实现了大规模的商业化生产。第二代高温超导带材具有高载流能力,低损耗和很强的机械特性的特点。尽管如此,单根超导带材载流有限,多根并联使用不可避免。基于第二代高温超导带材,国际上提出了多种超导导体结构,如CORC(Conductor On Round Core)导体、TSTC(Twisted Stacked-Tapes C
基质囊泡(Matrix Vesicles,MVs)是骨矿物初始形核以及晶体生长的场所,它对矿物的晶型、尺寸、形貌、取向等具有明显的调控作用。但MVs内磷酸钙晶体的生成机理以及不同晶相磷酸钙之间的转化过程等尚不明确。以脂质囊泡为体外矿化模型,替代MVs,研究囊泡内磷酸钙晶体的形成过程,有利于充分认识生物体内骨形成过程。脂质囊泡的大小、形貌和稳定性易受外部环境的影响。脂质囊泡的稳定性是体外模型能否设计
随着当今社会快速的发展,人类对能源的需求在不断增长。但是日益衰竭的化石能源已经远远不能满足社会快速发展的需求,并且还会带来环境污染、能源短缺等严重问题。发展可再生