网络爬虫的设计与实现

来源 :电脑知识与技术 | 被引量 : 0次 | 上传用户:yangzhaodsg
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着社会的飞速发展,互联网上信息容量急剧增加,人们对搜索引擎的依赖愈发强烈。网络爬虫是搜索引擎的关键技术之一,同时也是快速获取网络上可用资源的有效工具。为了能够对网络爬虫更深入的了解并熟练合理的应用于各种的应用和系统中,经过对网络爬虫的框架、基本工作流程、抓取策略的分析和了解,使用Java与HTML解析工具jsoup以及MySQL数据库实现一个网络爬虫,简单爬取京东的图书数据,用于用户喜好的分析及购买倾向的判断,为用户提供个性化的服务。
其他文献
改革开放以来,我国建筑企业作为"走出去"的领头羊,率先在国外承包工程,从传统的"设计—招标—建造"项目管理模式(Design-Bid-Build Method),逐步发展到建筑工程管理模式(Cons
乌江彭水水电站位于重庆市彭水县城上游11km,挡水大坝为碾压混凝土弧形重力坝,总装机容量175万kW。索道桥作为施工期间左右岸交通的重要枢纽,在彭水水电站的建设中发挥着重要作
柴米闸岸墙渗漏主要为浆砌石砌体内部不密实所致。采用高压灌浆方案,在上下游侧墙顶部钻孔,深度直至底板,用压力灌注水泥净浆,使水泥浆尽量填满块石的间隙,形成一道有效的防渗墙,解
近年来,国家加大了对小型病险水库除险加固工程的投入力度,承担小型病险水库加固工程监理任务已成为监理单位的一项重要业务,本文通过对小型病险水库监理工作的特点进行分析
目的:观察双歧杆菌三联活菌肠溶胶囊在稳定期COPD的临床疗效。方法:筛选在我院门诊长期随访42例患者,随机分为常规组及对照组各21例,其中对照组为常规组+双歧杆菌三联活菌肠
地下洞室衬砌混凝土一般为泵送入仓,坍落度大,水泥单耗高,受围岩强约束,且普遍存在地下水,比常态大坝混凝土更易产生裂缝,故必须采取有效措施,减少和控制裂缝的产生和发展。根据多项