Rabin指纹去重算法在搜索引擎中的应用

来源 :计算机系统应用 | 被引量 : 0次 | 上传用户:jayexxfu1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对搜索引擎在海量数据中搜索速度慢,占用存储空间大,对重复的网页去重性差的现状,提出一种基于Rabin指纹算法的去重方法,不仅对搜索到的URL地址进行去重,还对非重复URL地址对应的网页内容进行相似和相同的去重,试验表明能有效地提高搜索速度、节省存储空间,增强搜索的精度.
其他文献
本文研究了目前我国大部分乡镇财政工作中存在的诸多问题,并从问题的现状、原因、解决对策等三个方面进行了详尽探讨,为农村建设提供资金支持,促进我国农村的发展。
我国农业建设的发展关系到人们的生活品质和生活质量。随着人们生活水平的提升,人们越来越关注水稻的品质。目前人们更加青睐于品质优良的稻米,也就是高产优质水稻。高产优质
目前,有越来越多的农民选择大棚种植,因为大棚种植不受天气的影响,且大棚种植的一般是反季蔬菜,价钱相对来说比较高,因此受到越来越多的关注。很多农民在大棚中种植辣椒,和以往露地种植辣椒相比,大棚辣椒不仅产量高、品质好,而且价钱也很可观。因此,本文主要从从大棚辣椒种植技术入手,对辣椒选种、育苗和辣椒定植进行分析,最后提出了大棚辣椒病虫害防治措施,分别是大棚病害防治措施、虫害的防治,希望本文能够为广大种植
大棚种植在当前深受农民的喜爱,由于其能够起到良好的保温性能,为反季蔬菜的种植提供了可能。青海省地形比较复杂,处在青藏高原,有着丰富的光能资源,但热量资源较差且降水分
对某公司10万t/aMTBE装置投产初期出现的原料组分波动大、副产物甲基仲丁基醚(MSBE)含量髙等问题进行分析,通过改造送料流程调节原料比例、控制醇烯质量比值、调整催化精馏塔塔