论文部分内容阅读
通过用Python实现多线程和多进程网络爬虫,实验分析了采用多线程和多进程策略对爬虫程序效率的影响,为网络爬虫程序性能的相关研究提供参考。
基于网络信息采集的多线程与多进程性能研究
【摘 要】
：
通过用Python实现多线程和多进程网络爬虫,实验分析了采用多线程和多进程策略对爬虫程序效率的影响,为网络爬虫程序性能的相关研究提供参考。
【机 构】
：
内蒙古化工职业学院
【出 处】
：
内蒙古科技与经济
【发表日期】
：
2020年24期
【基金项目】
：
2018年度内蒙古化工职业学院自然科学科研项目“基于大数据的网络信息采集技术研究”(项目编号HYZR1805),内蒙古自治区教育科学研究“十三五”规划课题“高职院校技能大赛成果转化与促进专业课程建设的实践研究”(项目编号NZJGH2019197),2019年度内蒙古自治区高等学校科学研究项目(项目编号NJZY19280),教育部科技发展中心高校产学研创新基金项目(项目编号2018A01013)
其他文献
国家煤矿安全监察局局长赵铁锤在安全生产视频会议上进露，《关于加强煤矿安全生产工作，规范煤炭资源整合的若干意见》已经由煤矿整顿关闭工作部际联席会议11个成员单位联合印发
随着我国山区高速公路的建设发展,高速公路隧道日益增多,其交通安全问题的严重性愈加明显。从人、车、路等方面分析了高速公路隧道交通安全的影响因素。根据分析,从安全教育
该研究旨在观察口服＂蓝湾高纯硫酸氨基葡萄糖＂对骨关节损伤的疗效,为进一步推广应用提供临床依据。观察对象为8支国家运动队的运动员64人,患有22种伤病,伤病患有率为100例（人次）,
在系统分析相关研究的基础上,以保定市为例,展示了基于GIS和RS的土地利用时空变化研究的方法和流程,选取2004年和2016年轨道号为124/33的Landsat图像作为主要数据源,经过一系列的预处理获取了保定市2004年和2016年的土地利用数据,进而合成了一系列土地利用变化图谱来分析该地区土地利用时空变化情形,以期掌握该地区土地利用的空间分布形态和变化趋势,为该地区土地管理决策和土地可持续利用
目的探讨纤维支气管镜联合CD4/CD8检测在肺结节病中的诊断价值。方法对14例肺结节病的临床资料进行回顾性调查分析。结果 14例患者年龄31～58岁,女性占9例,平均年龄（44±3.4
对河南省汝阳县鞍子山钼矿区内矿体地质特征及分布规律进行了分析,发现本区大地构造位置地处中朝准地台南端,华熊台缘坳陷北部,秦岭—大别山钼成矿带中,二级构造单元隶属于华
分析了煤矿井下安全标志设置存在的问题,参考国家和行业标准,给出了煤矿井下安全标志设置依据及要求,提出了井下安全标志应从加强煤矿井下一线作业人员培训和安全标志维护角
介绍了利用VS2010平台工具集等新特性,通过合理配置平台环境编译出不同版本程序代码的方法,实现AutoCAD ObjectArx开发的跨环境、多版本的编译,消除开发人员开发软件过程中同时维护多个版本项目文件的麻烦。
目的观察半夏泻心汤加味治疗胆汁反流性胃炎的临床疗效。方法将50例确诊患者随机分成治疗组和对照组各25例,治疗组采用半夏泻心汤加味治疗,对照组采用西药吗丁啉片,奥美拉唑