大数据时代下爬虫技术应用与研究——以标讯快车项目为例

来源 :科技创新与应用 | 被引量 : 0次 | 上传用户:yuyan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网快速发展和大数据时代的来临,Web数据逐渐庞大,如何有效并快速地从互联网上获取到用户自身需要的信息是亟需解决的问题,网络爬虫技术应运而生,它是搜索引擎抓取系统的重要组成部分。文章是以标讯快车项目为研究目标,依托本学院在大数据方面的研究优势,结合该院IT特色,具有较强的实际意义和社会意义。
其他文献
五矿有色新田岭钨业有限公司以新技术、新工艺为依托,深挖选矿技术潜力,企业提质增效效果显著。相对于2010年投产时,该公司选矿实际回收率从77%逐步提高到84%、白钨精矿品位由56%逐
废旧家电中散落了很多有害物质,像电视机中的荧光粉不仅对身体的健康有害,而且散落出来还会污染环境,因此废旧电器必须由有资质的专业回收企业进行无害化的管理。最近新疆从事废
户外遇险救助行为中,多种因素导致救援出现时间延迟,导致损失扩大.文章设计里一种新的一键报警救助装置,它由监控后台和多个报警柱构成.报警柱采用光伏新能源供电,地埋蓄电池
加筋挡土墙是一种在地震灾害下受影响较小的挡土墙形式,相较于重力式挡土墙,其在地震载荷的破坏下呈现出良好的抗震性能。加筋挡土墙现今已经在工程领域中得到了广泛的应用,
以电解生产技术参数为设定条件,利用有限元ANSYS为平台,建立200kA电解槽三维电热场模型,对其进行模拟分析,其结果显示电解槽在生产中存在炉帮厚、伸腿长及内热不足等问题,这与生产
一种锌浸出渣处理方法,包括如下步骤:(1)将干燥后的锌浸出渣与焦粉混合均匀后从窑尾进料溜子加入挥发窑内;(2)混合物料在挥发窑高温条件下产出窑渣和烟气,锌浸出渣中的有价金属被还原
通过3台240 kA铝电解槽高温烟气焙烧实践,介绍了烟气焙烧法预热铝电解槽的操作方法以及操作过程中的工艺参数设置,比较了烟气焙烧法与焦粒焙烧法的焙烧启动成本,总结了烟气焙
介绍了电解槽的节能原理与新型导气式阳极,分析了传统阳极与新型导气式阳极的优缺点。通过电解槽上应用实践对比,证明了新型导气式阳极有利于阳极气体的排出,能有效降低阳极
本文结合某铝业公司和中南大学联合开发的低电压节能技术,探讨了铝电解节能的途径,介绍了铝电解节能生产的经验和效果。
为了进一步降低生产成本和“四项费用”,中铝山东企业氧化铝厂非铝产品区干部员工不断开动脑筋、修旧利废。近日,一项“骨架拼接”技改措施应运而生,不仅在生产中得到合理运用,而