信息不对称问题的跨模态哈希检索算法研究

来源 :西安理工大学 | 被引量 : 0次 | 上传用户:MUcrystal
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来互联网媒体不断的高速发展,社会快速步入了大数据信息时代,海量的多模态数据也随之应运而生。人们对这些海量多模态数据的检索需求也日益迫切,而跨模态哈希检索不仅可以实现数据跨模态间的检索,还具有检索高效性、低存储性等特点,因此受到越来越多研究人员的追捧。但目前大多数算法的关注点都聚焦在模态数据间的关联性以及语义鸿沟上,没有过多考虑不同模态数据间信息量的差异。以图像和文本模态数据为例,对计算机而言,图像数据所包含的信息量相比文本数据要更为丰富。本文也将针对这种信息不对称问题,对跨模态哈希检索进行研究。针对图像和文本数据间信息不对称问题,本文在深度语义特征及深度哈希的跨模态检索网络框架上,根据图像和文本数据包含信息量的丰富度,为图像和文本参照学习对象分配不同比例的关联损失,使跨模态哈希网络进行不对称的参照学习。具体而言,为最大化利用图像数据的丰富信息,本文提高了以图像为参照学习对象的关联损失比例,从而限定图像为跨模态哈希网络的主要参照学习对象,而文本数据由于信息量较少为次要参照学习对象。在上述算法的基础上,本文又提出了模态内语义相似的哈希码初始化方法,代替参照哈希码随机初始化方法。具体为在不对称参照学习之前,分别在各自单模态内进行参照学习,最终生成单模态内语义相似的图像及文本参照哈希码,用于替换随机初始化的图像及文本参照哈希码,以便更好地指导跨模态哈希网络进行不对称参照学习。最后本文通过在MIRFLICKR-25K,NUS-WIDE通用跨模态数据集上进行实验对比分析,验证了本文提出的算法以及参照哈希码初始化方法的有效性。
其他文献
用控制不等式的方法证明了杨学枝在其专著《数学奥林匹克不等式研究》中所提出的有关初等对称函数的一个猜想成立,并给出一个反向估计.
ZnO为直接带隙宽禁带半导体材料,可作为蓝绿波段光电子设备和半导体激光器件的基础材料。利用阳极氧化法制备的多孔氧化铝可以作为制备多种纳米复合材料的模板。本文主要对多
目的探讨抗核抗体(ANA)和自身免疫抗体谱检测在原发性胆汁性肝硬化(PBC)诊断中的价值。方法选择2015年1月至2017年7月接受诊断治疗的PBC患者51例作为PBC组,选择同期非PBC自身免疫
在城市形态转变,商业持续发展,老城区商业热度逐渐减弱的多重背景下,研究老城区商业网点空间分布变化规律及影响因素,对老城区商业空间持续、健康发展及更好地满足居民日益增
山西省忻定盆地的小地老虎一年发生3代,以第1代幼虫为害为主。第1代幼虫的发生为害程度与当年越冬代成虫始见期和4月份的降水、气温等有着密切的关系,总的趋向是在成虫始见期
通过AFM研究了双链两亲性分子双十八烷基-N-[对-N,N-二甲氨基苯基偶氮)吡啶翁丁酰基]-L天冬氨酸酯溴化物(DDPA)LB膜在气固及气液界面的结构。在被水化后,DDPA的单层膜自发组织成双层和囊泡。在增加成像用力
肺心病伴发急性心肌梗死(AMI)时临床表现多不典型,极易漏诊,现分析我院收治的老年人慢性肺心病伴发AMI患者40例,以探讨其临床特点.
从农业科技成果转化特点出发,对高新农业科技成果转化中的用户风险因素、科技成果自身的风险因素及转化过程中的风险因素3个方面进行了分析研究,总结了农业科技成果转化中的
当前科学技术和社会经济的日益发展,信息技术正在不断的发展和成熟,对于当前的用户来讲,通过相应的终端设备就可以实现信息的共享和传递,在移动互联网的时代背景之下,数据可