个性化新闻搜索引擎的研究与设计

被引量 : 2次 | 上传用户:cuidayue
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机各项技术的不断发展,信息化时代已经到来。如何让用户在海量的数据中快速并且准确的获取自己所需要的信息,是互联网行业一个亟待解决的问题。为此,搜索引擎应运而生。垂直搜索是搜索引擎中一个重要的组成部分,它能帮助用户在自己的专业领域快速的获取信息,可以获得比通用搜索更高的搜索效率和更准确的搜索结果。另外,个性化技术能针对不同的用户给出不同的检索方案,它对提高用户的检索满意度有很大帮助。目前大多数的搜索引擎是通过匹配索引关键词进行数据检索,并没有考虑到各个用户所关心的信息领域,所以搜索引擎检索出的相当一部分结果与用户的需求并不相关。垂直搜索引擎的个性化研究是解决这种检索结果相关性瓶颈的一种有效方法。本文从垂直搜索引擎的基本概念,基本原理,组成结构以及工作流程入手,研究了网络爬虫模块,索引模块及关键词检索模块等,并结合用户兴趣模型,设计了一种适合于垂直搜索引擎的个性化搜索解决方案,最后实现了个性化垂直搜索引擎的一个实例。网络爬虫模块从各大门户网站中进行数据爬取,并结合主题相关度进行URL筛选;索引模块引入了文本分类技术,在保证索引效率的基础上对不同类别的文本在构建索引时区别考虑;检索模块结合了用户兴趣模型和文本分类技术,提升了检索结果与用户意图之间的相关性。本文的研究内容和创新点主要包括三个方面。第一,提出了一种个性化垂直搜索中可行的专业爬虫解决方案。目前的垂直搜索引擎并没有充分的考虑URL主题相关性过滤,这将导致大量噪声网页产生。本文把URL相关性过滤机制引入到专业爬虫中,并对网络爬行策略进行了改进,提高了专业爬虫的信息采集效率。第二,提出了一种适合于垂直搜索的文本分类方法。目前的垂直搜索引擎主要是通过栏目标题等进行分类,它们存在人工干预强,分类过程不灵活等问题。本文将通用搜索的特征选择以及文本分类算法引入到垂直搜索中,并对其改进和优化,使其更适合垂直搜索引擎。第三,本文引入了适合垂直搜索的个性化建模方法,并通过相关反馈技术完善兴趣模型,让搜索引擎具有更强的个性化能力。
其他文献
耐力素质培养不仅仅是发展青少年学生心肺功能等身体素质,更重要的是培养和发展青少年学生有良好的意志品质等心理素质。
锥栗种实含有丰富的淀粉和糖分,同时富含脂肪、蛋白质、氨基酸、维生素以及抗坏血酸、胡萝卜素等物质。本文以福建锥栗为主要原料,采用三种常见的干燥方式(热风干燥、真空干
对某深厚黄土地基上土石坝的坝基黄土和筑坝黄土进行动三轴和共振柱等动力试验,求得其动强度、动应力-应变关系,以及用于计算动孔压的动孔压特性曲线及其他动参数。在静力分析
近年来,诸多的食品安全事件频繁发生,从被称为“毒奶粉”的三鹿牛奶到蒙牛、伊利的原料污染造成奶品存在致癌风险,思念食品事件、烟熏生姜,染色馒头以及屡禁不止的瘦肉精和地
针对空间钻探中硬质合金钻具部件的减摩润滑问题,提出一种在硬质合金基底上原位生长石墨烯的方法。在硬质合金基底上磁控溅射沉积非晶碳化硅(SiC)薄膜,利用合金中的粘结相Co
干酪是一种富含脂肪和蛋白质的高能量食品,尤其是切达干酪因其独特的风味特征而广受消费者喜爱。然而摄入过量的脂肪会造成肥胖症、高血脂、心脏病等疾病,随着消费者健康意识
临床研究证实肥胖与高血压密切相关,1948年世界卫生组织将肥胖列入疾病行列,并且认为是高血压、糖尿病、冠心病等代谢性疾病的危险因素。随着社会的发展高血压的患病率也在急剧
本文首先概括介绍了项目管理系统的相关概念,其次介绍了J2EE技术和软件体系结构的发展和演变,并介绍了这些技术的特点。本文设计的项目管理系统采用MVC模式和J2EE的多层体系
随着“建设创新型国家战略”的提出和“区域振兴规划”的实施,增强区域创新能力成为区域发展的核心内容。作为区域创新能力的载体,区域技术创新系统的构建与完善日益成为提升
电力电子变压器是一种新型智能电力变压器。它在传统电力变压器的基础上引入电力电子变换技术,实现一、二次侧电压的灵活控制。随着大功率电力电子器件制造能力的提高和电力