基于深度学习的手绘草图图像检索

来源 :云南师范大学 | 被引量 : 0次 | 上传用户:zhl1021
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网时代的快速发展,数字图像数据的数量呈现了井喷式增长,海量的数字图像数据对图像检索任务提出了迫切的需求。传统的图像检索任务包括基于文本的图像检索和基于内容的图像检索两种方式。因为仅仅依靠关键字进行检索的方式,基于文本的图像检索常常不能清楚表达人们的检索需求。基于内容的图像检索方式,时常因为无法提供所需要的查询图像而造成检索任务无法完成。基于上述检索方式的弊端,同时因为触摸设备的全面普及,基于手绘草图的图像检索方式得以提出并快速发展。在基于手绘草图的图像检索任务中,手绘草图因为高度抽象、多样性的结构特征对检索任务带来了极大的挑战。现有大多数的基于手绘草图的图像检索算法采用的策略是将手绘草图和自然图像这两个图像域的特征表示强行映射到共同的特征子空间,但是并未有效的利用手绘草图的结构。本文认为自然图像的特征表示应该是以手绘草图的结构为条件的。因此,受启发于人类在进行图像对比时采取的反复观看和比较局部图像区域的策略,结合卷积神经网络提取的特征更加鲁棒性的特点,本文提出了一个全新的基于深度学习的手绘草图图像检索框架。本文的手绘草图图像检索框架一共包括了两个模块。第一个模块是用于模拟人类策略的空间对齐网络(Flexible Latent Alignment Generator,FLAG),它能有效地发现手绘草图和自然图像之间潜在的共有结构,并为第二个模块特征对齐网络提供初始的自然图像候选兴趣区域集合;第二个模块是基于联合注意力机制的特征对齐网络(Representation Learning with Co-attention,RLWC),主要目的是自适应的以查询手绘草图结构作为条件输出自然图像的特征表示。通过在Sketchy手绘草图数据库上的多组对比实验,结果表明,在手绘草图图像检索任务上本文手绘草图检索框架拥有更佳的检索性能,特别是基于零样本学习任务的检索任务中性能提升尤其明显。
其他文献
中国融资租赁行业发展迅速,但权威评价标准的缺失不利于行业的健康发展。本文综合借鉴金融行业评价方法,以平衡计分卡、CAMELS模型、监管部门相关权威文件为基础,尝试构建融
通过分析物业管理内涵的演变及我国物业管理的短暂发展历史,对我国当前物业管理产业的特点进行了归纳和总结,并在此基础上,运用迈克尔·波特的五种竞争力分析模型,对我国物业
关于道德的话题一直是我们关注的热点,尤其近几年大家热议的道德滑坡问题,值得我们去深思。大量研究采用亲社会行为作为测量道德行为的一种方法,亲社会行为泛指一切符合社会
微课是以流媒体形式展示的围绕某个知识点或教学环节开展的简短、完整的教学活动,包括课例视频及相关的教学设计、教学课件、教学反思和教师评价等教学资源。微课的作用为"解
目的对甲状腺疾病的临床诊断与治疗方法进行分析与探究。方法 100例患有甲状腺疾病的患者,分别采用CT检测与超声检查两种方法对患者进行检查,并采用手术方法对患者实施治疗,
我国2005年开始的股权分置改革堪称近年来资本市场上具有里程碑意义的一个重要标志,自此之后,资本市场过去流通股与非流通股股权分置的局面一去不返,包括国有股在内的所有股
通过低醉酒度白酒的研究,取得了白酒醉酒度评价技术、判定浓香型白酒醉酒度影响因子的技术体系和低醉酒度优质浓香型白酒生产技术等关键技术,同时取得了低醉酒度白酒对人体的
环境风险评价包括源项分析、环境途径、风险评价和风险管理 4部分。环境风险管理的目的是在行动方案效益与其实际或潜在的风险及降低风险的代价间谋求平衡 ,它是政府的职责 ,
<正>厨艺更在丹青上张大千是丹青巨匠,当世与齐白石并称"南张北齐"。徐悲鸿对他更是推崇:"张大千,五百年来第一人。"20世纪50年代,张大千游历世界,获得巨大国际声誉,被西方艺
本文共有五部分。第一、二、三部分侧重理论阐述。主要试图明晰MTV的一些概念与认识 ,提炼MTV广告的特征 ,归纳了“MTV广告”的定义 ,并分析这种新形式在广告传播中的意义与
期刊