基于跨模态的图像浏览与推荐关键技术研究

被引量 : 0次 | 上传用户:rain918
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网的高速发展和图像获取技术的不断提高,图像在网络中的产生速度也呈爆炸式增长。这就导致了如何更好的对图像数据进行组织,管理和获取成为一个广泛关注的问题。当前随着图像数据增长速度越来越快,无论是单纯基于语义信息或者视觉信息的图像浏览和推荐算法都不能够很好的解决该问题,因此本文着重研究基于跨模态信息的图像浏览与推荐的相关方法,并涉及三个重要的方面:图像跨模态关联网络的构建;基于跨模态信息的图像聚类算法研究;基于跨模态信息的图像个性化推荐方法研究。在图像跨模态关联网络的构建方面,语义关联网络和视觉关联网络是两个主要组成部分。语义关联网络的构建主要考虑基于概念在多标注图像数据集中共现概率的层次内关联关系和基于WordNet定义的固有层次关联关系所共同构成。视觉关联网络的构建则主要通过提取图像视觉信息特征来完成获得图像集合之间的视觉关联的任务。最后通过语义关联网络和视觉关联网络的融合形成跨模态关联网络。在基于跨模态信息的图像聚类方面,首先考虑的是视觉信息和语义信息的特征提取方法:视觉信息涉及基于SIFT特征的LLC线性编码方法和SPM分层特征提取方法;语义信息的特征提取方法则定义一个依赖于数据集标注信息的共现关联网络,并基于这个网络对图像中包含的语义标注信息进行TF-IDF优化编码。接着本文采用CCA方法将两个不同维度的特征进行跨模态信息融合;并为图像聚类提供跨模态特征。在基于跨模态信息的图像个性化推荐算法方面,本文详细介绍了该算法的设计框架和各部分的设计过程。首先是基于跨模态关联网络的图像多模态关联信息挖掘过程,它依赖于跨模态关联网络建立多模态信息的关联挖掘机制;接着是基于用户个性化模型的多模态关联融合,主要针对关联挖掘产生的图像候选集构建基于语义关联和视觉关联的跨模态图模型,并在图模型的构建中引入用户个性化模型。最后是基于随机游走的关联推荐算法,在跨模态图模型中建立一种模拟人类联想思维方式的浏览推荐模式,其目的是让算法能够更加准确的捕捉用户对于图像的兴趣关注点,并且为用户提供更好的图像浏览与推荐体验。
其他文献
从权利本位的内容、特点以及逻辑论证来看,权利本位存在着缺陷:操作性差、不能用实证证明以及用外在观点看义务。因此,应该把权利本位修正为“通过义务认同的权利实现”比较
在音频设备中,扬声器的使用非常普遍,但是人们对扬声器的关注似乎远不如其它设备,原因固然是多方面的,但主要原因是扬声器的不可调节性和声辐射的不确定性。实际上扬声器是音
通过对新金华山隧道洞身段大管棚导向跟管技术穿过软弱粘土层的应用,阐述了这种管棚技术运用的原理及施工过程,对今后隧道软弱地层使用管棚超前支护防止管棚偏向起到指导作用
<正> 石林县板桥农村信用社是五十年代成立的,现有职工14人。到2000年底,该社各项存款1914万元,各项贷款1320万元。不良贷款占比较高,原因主要是负责人问题较多。自2001年9月
土地财政是指地方政府利用土地所有权和管理权所进行的财政收支活动和利益分配关系。它是中国特色经济发展模式的一个固有特征,目前土地财政已构成地方政府财政收入的半壁江
由于汽车变速器在不同工作状态下产生的振动噪声信号不同,对其在各档位工作状态下振动噪声信号进行测量,通过分析变速器的振动信号频谱,可有效找到贡献较大的频率,同时,还可
<正> 为了加强收购资金管理,实现封闭运行,完成国家赋予农发行的历史使命,农发行必须建设一支政治合格、思想过硬、业务精通的适应新形势要求的干部队伍。而要建设一支这样高
通过机动车样线和步行样线两种调查方式,采用距离取样方法,对新疆塔什库尔干地区岩羊(Pseudoisnayaur)和北山羊(Capra sibirica)的种群数量进行了调查分析。采用AIC拟合模型
本文采用文献研究法、调查研究法、案例分析等方法,研究了公安机关自由裁量权的制约监督问题。论文共分为四个部分,一是论述了公安机关自由裁量权的内涵、特征、范围、表现形
广东省地处东南沿海部位,属于粮食主要销售区。近年来,广东省常住人口与流动人口数量迅速增加,全省粮食消费量快速提高,而广东省的耕地面积及粮食总产量减少,商品粮主要靠外