基于类别原型及深度学习的零样本学习研究与应用

来源 :西南大学 | 被引量 : 0次 | 上传用户:bblp520a
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
图像分类任务在实际生活中有着许多的应用场景。得益于近年来出现的具有人工标注的大型数据集,深度神经网络在图像分类任务上取得了不错的效果。传统监督方法需要大量标注数据用来训练分类器。然而随着需要分类的类别数指数增长以及某些细粒度分类任务的需要,获取类别对应的标注数据变得代价高昂甚至难以实现。例如,对于珍稀动物种类,可用的标注数据不足以学习可靠的分类器。为解决上述问题,研究人员提出了零样本学习,它使用有限数量的可见类样本进行学习,通过共享知识的传递来对在训练阶段不曾出现的新类别进行分类,这也成为了一个热门研究方向,并被广泛应用。已有基于映射的零样本学习方法大多试图寻找视觉空间和语义空间之间的直接映射关系,忽略了两个空间存在分布上的差异;由于模型不经过任何适应性改变直接应用到不可见类上,对可见类有所偏好。针对上述问题,本文提出了一个基于类别原型和潜在中间层的零样本学习方法(Inter ZSL),Inter ZSL引入一个中间的潜在空间来对齐图片视觉空间和类别语义空间,利用可见类和不可见类的类别语义表示对类别原型进行校正,并引入局部流形正则化来保留视觉空间原始数据的局部结构,从而可以获得潜在中间空间上的更具区分性的类别嵌入。通过这种方式,Inter ZSL更好实现了可见类到不可见类的知识转移,学到了更为鲁棒的视觉空间和语义空间的映射关系。在基准数据集上的实验结果表明,本文提出的Inter ZSL在零样本学习任务上有显著的分类性能提升。针对传统零样本分类方法无法解决实际生活中复杂图片问题,本文关注更具挑战性的多标签零样本学习问题。针对现有多标签零样本学习方法忽视区域特征蕴含的辨别性信息,同时对多标签问题中标签关联性的建模不足的问题,提出了一种基于图卷积网络的多标签零样本学习方法(MZSL-GCN)。MZSL-GCN是一个端到端训练的网络框架,该框架利用图卷积网络来探索和捕获类别标签的关联性,从而学到相互关联的类别分类器。同时,MZSL-GCN通过引入关键区域发现机制去学习自适应的局部特征,并和全局视觉融合得到新的图片特征表示。MZSL-GCN方法在基准数据集上实现了较优的性能,在传统多标签分类问题上也有优异的效果。本文基于类别原型和潜在中间层的零样本学习方法Inter ZSL,通过学习双向映射和类别原型校正有效缓解了领域漂移问题。基于图卷积网络的多标签零样本学习模型MZSL-GCN,使用图卷积网络对标签关联性进行了显式建模。两个模型均显著提高了零样本学习的分类精度,同时也解决了已有方法的不足之处。
其他文献
樱桃在我国种植历史悠久,色泽鲜艳且营养丰富,深受人们喜爱。樱桃中含有多种生物活性物质,其中多酚对人类健康发挥重要作用。多酚能清除自由基,具有抗氧化、抗炎活性,而氧化应激是许多慢性疾病和退行性病变的决定性因素,因此多酚等天然活性物质的研究为疾病的治疗提供了新的方向。溃疡性结肠炎是炎症性肠病的一种,其发病机制尚不明确。药物治疗结肠炎的毒副作用明显,易复发,增加了结肠癌变风险。由于多酚的促凋亡和抗血管生
生物小分子是生物大分子的基本组成单元,也是生命活动的重要参与者。生物大分子活动的最终目标常常是化学小分子的代谢。肾上腺素是哺乳动物和人类的一种重要的儿茶酚胺类神经传递物质,它控制着神经系统进行一系列生物反应及神经化学过程。肾上腺素也是一种重要的生物分子。研究生物小分子与肾上腺素的相互作用,对于推动生命科学、药物化学、物理化学等学科的发展能起到一定的积极作用。本文用电化学方法和量子化学方法研究了生物
为了改善肉糜制品的食用品质、出品率等,常在其中添加亲水胶体类添加剂,如黄原胶、卡拉胶等,是改善其品质的常用方法。随着消费者健康营养观念的不断加强,天然、无添加等绿色标签的产品逐渐成为首选。圆苞车前子壳(Psyllium husk,PH)在国家卫生和计划生育委员会2014年第10号公告中被列为新资源食品,其膳食纤维含量达80%以上,主要用作膳食纤维补充剂和动物饲料。圆苞车前子壳中的膳食纤维主要是阿拉
基于武术操在全国的推广,潜江市江汉油田教育实业集团所属中学现开展武术操的经历,本文以武术操在中学选项课开展的困境与对策为研究对象,以江汉油田高级中学、江汉油田广华中学、江汉油田广华初级中学、江汉油田油建学校、江汉油田实验初中、江汉油田东方红学校、江汉油田周矶学校、江汉油田物探学校,这八所中学的校领导为访谈对象,以学校的部分教师和中学生为问卷调查对象。运用文献资料法、访谈法、问卷调查法和数理统计法进
明胶是一类胶原蛋白部分水解得到的天然高分子化合物,具有可生物降解、生物相容、无毒等优点以及良好的凝胶性和成膜性等特性,因此明胶膜为替代塑料产品、缓解环境压力提供了可能性。明胶膜有多种制备方法,但都不能显著改善其机械性能较差、亲水性过强、易溶解且不能耐受高温灭菌等缺点,这限制了明胶膜的实际应用。研究并解决上述问题对促进明胶膜的实际应用具有重要意义,同时也为明胶膜性能的改善提供理论依据。本研究以明胶为
传统的推荐模型主要根据用户偏好等信息,向用户推荐其可能需要的项目,在缓解“信息过载”问题上起到重要的作用,被广泛应用于各个领域,备受广大研究者关注。随着社交网络的快速发展,以及社交与各类应用的深度整合,结合社交信息的推荐模型是目前推荐研究领域较为活跃的研究方向之一,通过社交网络获得丰富的社交信息,将社交信息融入到传统的推荐模型中,预测未知项目评分生成推荐结果,极大地缓解传统推荐模型存在的数据稀疏性
花生(Arachis hypogaea Linn)是一种分布广泛、营养丰富的植物资源,然而,其中含有的花生致敏蛋白常常引起食物过敏。花生过敏是一种典型的Ig E介导的过敏反应,常见症状涉及皮肤、呼吸道、消化系统等,严重时可危及生命,目前有研究证明植物多酚与花生蛋白结合后可以降低花生致敏作用。为进一步解析多酚缓解花生蛋白致敏作用机制及构效关系,本论文利用光谱学技术研究多酚与花生蛋白结合后的光谱行为变
新课标提出语文课程应致力于学生语文素养的形成与发展,阅读名著是培养学生语文素养的重要路径。因此,初中语文教育工作者应将探索名著导读的有效策略作为重要使命。思维导图因其丰富而独特的属性,在发展学生高阶思维能力、提高学生综合阅读能力方面发挥着重要作用。如能将思维导图的思维特性运用于初中语文名著导读中,必能补充当前一线教学的阅读教学策略,为学生搭建优质的课程活动平台。本研究以相关学术研究和自身实践经验为
目前农业害虫防治主要采用化学防治,大量化学杀虫剂在田间使用,虽然能在短时间内起到一定的杀虫作用,但是高残留会造成多数哺乳动物的急性中毒,产生严重的环境污染。因此提出生物防治的理念,培育益虫对害虫进行防治,这样不仅能长时间地对害虫数量进行控制,还不会对环境造成破坏,保证了绿色可持续发展。蠋蝽是一种天敌昆虫,具有捕食范围广,存活能力强等特点,在农林害虫的防治领域得到了广泛运用,防治效果显著,同时减少了
兔肉营养质量较好,然而兔肉具有较高含量的不饱和脂肪酸和蛋白质,因此兔肉在冷藏和加工过程中脂质和蛋白质容易发生氧化,影响兔肉的食用品质及加工特性。化学合成保鲜剂具有一定的潜在毒性,长期食用会对人体健康造成一定的伤害。天然保鲜剂因其绿色、安全、来源广、高效等特点受到人们的广泛关注,具有广阔的发展前景。紫背菜(Gynura bicolor(Roxb.ex Willd.)DC.)富含多酚、黄酮、类胡萝卜素