基于稀疏图结构的无监督图像检索研究

来源 :南京理工大学 | 被引量 : 0次 | 上传用户:shlpsfs
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着图像数据的日益增长,图像近似搜索(又称图像检索)扮演着越来越重要的作用。在过去的几年里,监督的图像检索可以获得令人满意的效果,然而由于带标签数据集的稀少以及人工标注的成本太高,无监督的图像检索成为主要关注点。为了节省存储空间,本文研究稀疏图在无监督图像检索中的应用,致力于在节省空间的同时提高图像近似搜索的精确度。该技术目前有以下三个主要问题需要解决:(1)标签信息缺失情况下的近邻信息挖掘问题。到目前为止,无监督图像检索算法的性能整体上不如监督算法,主要原因是标签信息的缺失导致原始近邻信息不完整,最终引起无监督算法整体检索性能的下降。因而需使用合适的模型来挖掘和存储近似信息。(2)在上一个问题已解决的基础上,跨模态检索任务中近似信息不一致问题。由于各个模态数据结构的不一致性,在标签信息缺失的情况下,每个模态挖掘的近邻信息不完全相同,为此,必须在此基础上获取统一的语义近邻关系以指导跨模态检索的训练过程。(3)在前两个问题已解决的基础上,深度训练过程中全局近似信息合理利用问题。由于前文获取的近似信息是全局信息,而深度训练过程中通常按批迭代更新,为此全局信息遭到破坏。因此,在深度模型中应考虑最大化利用已获取的全局近似信息以减少性能损失。基于上述三个问题,本文的主要工作内容及成果如下:(1)针对第一个问题,本文提出了基于稀疏图的自监督哈希算法,该算法使用稀疏图结构存储已挖掘的近邻信息,并将其整体用于训练。为证明该结构的合理性,该算法的稀疏图使用最常见的k NN算法构建,同时对所有实验数据集使用同一个k值,并将该稀疏图用于线性算法中。此外,该算法引入重构损失和量化损失以提高性能,在多个数据集上的实验证明了该算法的有效性。(2)针对第二个问题,本文提出了基于语义变基的跨模态哈希算法,该算法使用k NN算法构建每个模态的近邻稀疏图,同时为了获得统一的语义近邻信息以使各个模态共享,引入可迭代学习的语义稀疏图,该稀疏图的目的是给各个模态生成的近似连接添加0到1间的权重,该权重表示这些近邻关系的概率。最后语义概率稀疏图和各个模态的近邻稀疏图整体构成了跨模态检索的近邻图。该算法除量化损失和重构损失外,还对语义概率稀疏图的权重进行了约束,以生成符合预期的权重值。(3)针对第三个问题,本文提出了基于稀疏图的深度哈希算法,该算法仍使用上述两种算法引入的近邻稀疏图指导神经网络的训练,同时改变了传统的随机批量训练算法,使得训练过程中可以有效使用近邻关系更新网络权重。不失一般性,该算法在单模态检索上实现。在多个数据集上的实验结果表明改进的训练方式结合近邻稀疏图可以有效减少全局信息丢失引起的性能下降。此外,由于深度神经网络强大的拟合功能,使得所提模型在高相关性检索方面可以获得很好的表现。
其他文献
现代雷达系统面临着复杂多变的干扰环境,如何实现有效的抗干扰以保证雷达系统的性能是一个重要的挑战。本文围绕数字阵列雷达抗干扰相关关键技术进行了研究。首先,针对干扰空/时/频等域的多维特征,建立了典型干扰特征参数集,给出了干扰样式综合分类/识别方法;然后,分别从精细化主动抗干扰算法优化、复杂波形优化设计、反干扰硬件电路实现等三个层面开展了主动抗有源干扰技术理论分析和工程应用的研究工作。本文的研究内容包
溶液法生长的卤化铅钙钛矿(lead halide perovskites,LHPs)具有制备成本低、缺陷容忍度高、带隙易调控等优点,在下一代光电器件具有广阔的应用前景。比如,基于LHPs活性层的太阳能电池的光电转化效率已经达到25%以上,有望替代目前昂贵的硅基太阳能电池实现低成本发电。同时,LHPs纳米晶具有接近于100%的光致发光效率、窄的半高宽、较广的色域(400~800 nm)的特点,基于L
磺胺类抗生素(sulfonamide antibiotics,SAs)是一类常见的广谱类抗生素,被广泛应用于临床医学和养殖行业。然而,SAs在生态环境中难降解且累积效应明显,已成为我国乃至全球所面临的环境问题之一。光催化技术是高级氧化技术的一种,因其反应条件温和、反应过程环境友好且操作简单等优点而受到广泛的关注。基于半导体材料的光催化技术可利用清洁、无污染的太阳能来治理环境污染,其核心是开发高效的
本文从光子增强热电子发射效应(PETE)在太阳能方面的应用开始分析,对其中的核心组件负电子亲和势砷化镓(NEA GaAs)光电阴极的工作原理、工程结构、材料特性与光电转换性能进行了实验与研究。首先,文章介绍了国内外太阳能发电领域的发展情况,说明了PETE效应的先进性。围绕PETE系统本文分析了其中核心装置的工作原理,以透射式GaAs阴极作为研究对象,对其发射电流理论模型与工作模式进行了探索,并阐明
随着风电渗透率的不断提高,单机效益控制下风电机组输出功率的随机波动将严重影响电网频率稳定。此外,由于经电力电子设备并网,大规模风电接入也会弱化电力系统的惯性响应。为支撑电力系统有功功率平衡、维持电网频率稳定,风电机组按电网调频需求输出电磁功率已成为风电友好并网的迫切要求。单机效益控制利用风轮在零度桨距角下、最佳叶尖速比处风能利用系数最大的气动特性,将零度桨距角风轮跟踪对应于最佳叶尖速比的最优转速作
学位
本文针对免烧结陶粒密度较大的问题,提出了利用减重材料制备轻质免烧陶粒的方法,并且围绕轻质免烧陶粒,展开了轻集料混凝土的力学性能、保温性能、内养护性能和高硫渣轻集料膨胀性能的研究。制备了轻质免烧硅酸盐轻集料。利用漂珠、膨胀珍珠岩颗粒、膨胀珍珠岩粉末、粉煤灰和水泥作为原材料,利用绝对体积法设计轻质免烧结轻集料,在1MPa,180℃水热合成8h的条件下,制备出3种轻集料:漂珠硅酸盐轻集料(Floatin
近年来,微型涡喷发动机被广泛应用于各种小型作战武器以及无人机上,微型涡喷发动机具有体积小、重量轻、可靠性高等优点。作为精确打击小型作战武器的动力供应系统具有很重要的研究价值。因此本文针对某型微型涡喷发动机的工作特点,对其控制需求进行分析,并根据控制器的控制需求设计该控制器的整体方案,对控制系统的硬件以及软件部分进行设计并完成PCB布板和实验。为提高微型涡喷发动机的转速控制系统的鲁棒性和响应速度,采
超空泡减阻技术在水下高速航行体的研究中应用广泛,对该技术的研究主要包括数值仿真和实验研究两方面,其中,由于超空泡本身复杂的流场特性,实验研究是评估航行体水下运动性能的重要手段。超空泡射弹水槽实验研究相较仿真研究,其空化现象与实际应用更为相近,但由于其发射状态不易控制、试验条件受限及分析方法缺乏等,取得的成果有限。本文针对目前对水中高速射弹空泡形态及弹道参数精确测试能力的不足,搭建了一套能够对超空泡
逆变器是一种将直流电转换为交流电的电能变换装置。多电平逆变器具有开关管电压应力低、输出电压质量高以及电磁干扰小等诸多优势受到广泛研究。相对于传统多电平逆变器而言,双向高频隔离多电平逆变器结合了高频链技术和多电平逆变技术,不仅具有多电平技术的诸多优势,还兼具有高频电气隔离、双向功率流等优点。目前,双向高频隔离多电平逆变器主要采用基于双有源桥的两级式架构。两级式架构由高频隔离DC-DC和全桥DC-AC