基于Scrapy的论文引用爬虫的设计与实现

来源 :现代计算机(专业版) | 被引量 : 0次 | 上传用户:zjkghost10
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
互联网的迅速发展对于信息的发现和搜集带来巨大的挑战,至今爬虫技术已经成为互联网研究热点之一。基于Scrapy设计一个采集网页上面引用的作者和引用信息的爬虫,系统运行结果显示所设计的爬虫对于爬取引用信息,并将其整理成便于存储和理解的结果有较好的效果。
其他文献
采用数理统计方法处理了某大型造纸公司近一年的有关生产技术数据,首次建立了表达废纸原料种类、用量和废水污染负荷关系的多元线性方程,揭示了废水污染负荷与原料废纸用量、
2004~2013年对海南岛东部沿海海草床进行长期定点监测,对近10 a来海南岛东部沿海海草床海草种类、平均盖度、平均密度及平均生物量进行了统计分析,探讨其变化趋势。结果表明,
盟市级牧业气象服务系统预报产品的开发与利用魏玉荣,郝璐(内蒙古农牧业气象中心,010051,呼和浩特)前言内蒙古牧业经济在自治区整体经济中占有重要位置,而天气气候条件对草原畜牧业的制约
随着烟草行业改革的不断深入和企业内部控制制度理论的不断发展,烟草企业实施财务精益化管理,是企业实现内涵式发展,推进降本增效的重要举措。文章立足于精益化财务支出管理
肿瘤已成为人类死亡的主要原因。其病因至今仍未完全研究清楚。国内外比较一致的观点是肿瘤是正常细胞长期在很多外因和内因作用下发生了基因调控的质变,导致了过度增殖的后
晋国宗法政治的蜕变经历了一个漫长的过程。首先是传统宗法制的衰亡,它始于西周末期,至春秋中期时基本消失殆尽。晋国传统宗法政治的衰亡过程主要由殇叔代文侯、曲沃代翼、诛
论辽代宗教文化黄震云公元907年(辽太祖元年),耶律阿保机担任契丹可汗职务,至公元1125年(保大五年)天祚帝耶律延禧被金兵俘获,辽亡、辽代历时218年。二百多年间,契丹民族延袭了唐代三教论衡的传
研究了微波辐射下α-蒎烯与甲醇的加成反应。将0.03mol的α-蒎烯、0.12mol甲醇、1.34mmol硫酸在功率70W的微波辐射下反应100min,主产物α-松油基甲醚的得率可达47.5%。选择性为44.7
两周时期是华夏文明和华夏民族形成和发展的重要阶段。武王克殷后为拱卫王室实行分封制,以藩屏周,打破了夏商时期方国林立的格局。晋南地区位于中原文明与戎狄文化的过渡地带
<正>"贪如火,不历禁,势成燎原,祸国殃民,终留恶名,苦果必自吞。""非吾之有莫伸手,非分之财莫进门。"……台上唱词振聋发聩,引发观演的每个党员干部深思:我们离他们有多远?8个