基于特征选择的排序学习算法研究

来源 :兰州交通大学 | 被引量 : 0次 | 上传用户:wren200
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网上每天都会产生海量数据,累积起来的数据量达到上万亿个网页之多,用户需要通过检索工具获取相关信息,而检索工具需要使用特定的计算机根据一定的策略先从互联网上搜集信息,再完成对信息的组织和处理,最后才能提供相关的查询服务。排序学习作为一个新兴研究领域,已被证实能够有效借助机器学习技巧处理用户查询数据的排序问题。然而大型的搜索系统必须快速的对用户查询做出响应,并且对候选文档的特征的计算必须符合严格的后端延迟约束。就目前来看,以谷歌为代表的搜索引擎公司在做网页排名时,考虑的特征高达数百种,如果将所有特征用于构建排序学习模型,其排序效率必然会大大降低,特征数量必须给出一定的限制,方能满足越来越多的检索次数和检索内容。利用特征选择来找到满足延迟需求的特性子集,使所训练的模型具有高效性显得尤为必要。基于此,本文主要包括如下内容:首先,给出了本文的研究背景、国内外研究现状和研究思路。研究了排序学习的来龙去脉,概括性的对排序学习算法做了分类和描述,分析了用于信息检索和排序学习的模型框架,并且在此基础上介绍了本文所使用的排序学习所涉及的基本算法;再就是研究了特征选择的基本流程、常用框架、基本分类以及评价准则等。其次,特征选择作为一种有效的数据降维手段,包含诸多优势,能够在训练集上识别最有效的相关特征子集,而这个特征子集可以被用来学习原有任务的模型。本文从此角度出发,探索了特征选择在排序学习上的应用,并利用层次聚类的特性,将二者结合,首先从初始点选择的角度,改进了两种基于过滤式的快速特征选择算法,然后提出了一种新的快速特征选择框架。在两个标准数据集上的实验证明了所提算法的有效性,即要么能够在较小特征子集上获得较高的排序准确率,要么在中等特征子集上获得最好的排序准确率。然后,同样针对排序学习中存在无用特征的问题,提出一种封装式特征选择算法,在算法中考虑了特征选择的两种标准,使得所选特征子集,不仅降低了目标函数损失,而且减少了特征两两之间的总体相似度。该算法在排序任务中,利用皮尔森相关系数来度量特征之间的相似性,将该相似性加入到损失函数的惩罚项中,采用前向-后向贪婪算法选取重要特征。在三个标准数据集上实验表明,该算法能够通过优化损失函数,减少了两个特征之间的相似性,从而选择出最重要的特征,在较小特征子集上获得高于过滤式的排序准确率,其次与同类算法相比,获得较好结果。最后,对全文做了总结,概括了本文的主要内容,给出了几点关于特征选择在排序学习上的思路,并且提出了下一步的研究方向和研究内容,描述了未来的研究趋势。
其他文献
膨胀土是由蒙脱石、伊利石和高岭石等强亲水性矿物组成的一种特殊粘土,由于其特殊的矿物组成,表现出来显著的吸水膨胀、失水收缩特性,因土体吸水膨胀而产生膨胀力,同样也是膨胀土的显著特性之一。在成都平原地区,膨胀土分布广泛,近年来,随着成都大力发展基础设施建设,进行了一大批的膨胀土基坑的开挖工程,在基坑开挖后,大量的基坑边坡出现变形过大、坡脚软化、悬臂桩倾斜、甚至整体破坏的现象,特别是在降雨过后,发生悬臂
异构网络(Heterogeneous Networks,HNs)环境下网络多媒体业务用户体验质量(Quality of Experience,Qo E)端到端保证,存在以下挑战:(1)网络多媒体业务分类不合理,对QoE的考虑
企业并购作为企业经营过程中的重大战略,其并购绩效好坏将会直接影响企业本身的长短期绩效。机构投资者持股成为企业的大股东,会出于自身利益参与企业的管理、决策和并购行为
长周期相是镁合金中一类特殊强化相,因其对镁合金综合力学性能具有显著的强化作用,受到广泛关注。但由于长周期相结构复杂,其变形机制尚不明确。由于变形结构从本质上影响着材料的力学性能,因此弄清长周期相的变形机制可以为长周期相强化型合金设计及加工工艺制定提供重要的理论指导。本文选取Mg85Zn6Y9(at%)长周期单相合金以及Mg97Zn1Y2(at%)长周期相强化型镁合金为研究对象,综合利用扫描电子显微
羟基自由基(·OH)反应是有机污染物在大气和水环境中的重要降解途径。有机污染物与·OH反应的速率常数(KOH)是表征有机污染物环境持久性和进行生态风险评价的重要指标。仅通
能源使用带来的环境问题以及气候变化,已成为世界各国面临的重大危机和严峻挑战。家用电器作为大多数人每天都会使用的产品,其用电量和能源消耗量不容小觑。节能家电的推广能
自2015年起,锑烯二维纳米材料因其具有与石墨烯类似的层状结构和一些优于石墨烯的物理及光电性能而备受关注。锑烯纳米材料具有高的载流子迁移率及可调节的带隙,较短的面外原子键长和较强的自旋-轨道耦合(spin-orbit coupling)效应,使其具有特殊的物理化学性能,特别适用于半导体、光电子元器件制备,等离子体探测以及超短脉冲的产生等诸多领域。光声成像是一种非入侵性的无损成像技术,兼具光学成像的
伴随着中国证券市场的不断成熟,尤其是上海证券交易所和深圳证券交易所的成立,敌意收购这种在西方国家盛行已久的金融模式也逐渐在中国具备了实施的可能性。从1993年开始,国
随着经济的不断发展变化,我国产业结构已经进入到了深度调整阶段。建筑业作为我国的重要经济支柱,正面临着市场增速递减和市场容量缩小的局面。建筑企业在复杂的市场竞争环境下,忧患意识增强并开始强调内部管理工作的有效性。项目管理作为建筑企业内部管理工作的重要组成部分,将成为优化改进的重点。科学合理的对建筑施工项目作出绩效评价,有利于项目管理水平的提升。但由于行业特征以及CS公司内部在经营管理方面的不足,导致
随着智能手机的广泛普及,人们的日常行为活动被记录下来,形成轨迹大数据。如何分析用户的大量移动轨迹数据,挖掘这些海量轨迹数据中蕴含着的有价值信息是当前移动对象研究中