网络舆情分析中智能爬虫的设计

来源 :电脑知识与技术 | 被引量 : 0次 | 上传用户:q363342684
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
网络爬虫作为舆情分析系统的信息源收集器,其性能的优良直接关系到舆情分析结果的好坏。该文针对舆情分析要求信息源具有较高的主题覆盖率的要求,同时考虑到现有爬虫在有效利用网络资源方面的薄弱现状,在现有爬虫的基础上加入了爬虫测速模块、主题更改模块,为提高爬虫在舆情信息收集中的性能提出了一些解决方法。
其他文献
罗布地区蕴藏着丰富的民间文学,尤其是歌谣,因此这个地区被称之为“歌谣之乡”。本论文分为六章,分别分析罗布歌谣的时代性、本地区人们的风俗习惯、情感世界及生存环境,简析
该文初步探讨了phthon多线程应用的两种方式:_thread模块和threading模块,两种实现途径各有优点和缺点,_thread模块是phthon的低级方式,接口更加直接和灵活;threading模块是t
研究了大豆肽对小鼠免疫器官和免疫功能的影响。将120只小鼠随机分成4组,对照组饲喂基础日粮,3个试验组分别在基础日粮中添加1%、2%、4%的自制大豆肽,饲喂小鼠21 d后,以免疫
<正>引言勾画了大气环境监测质量控制体系图;总结了大气环境监测全程序质量控制措施;提出了提高大气环境监测质量控制的一些建议。大气环境监测质量控制的现状为顺应环保形势
基于最少旅行商数,旅行商间的路径平衡,遍历城市的时间窗等约束条件,建立数学模型,用改进的模拟退火算法,优化多旅行商遍历路径,该算法增加了记忆因子,记住最小的局部最优点,
涤纶纤维(PET)具有高强度、高模量、良好的耐热性及尺寸稳定性等综合性能,在我国有着广泛的应用和产业基础。但涤纶纤维属于熔融性的可燃性纤维,燃烧过程中出现熔滴现象,容易
雷沛鸿先生是中国近代教育的一位著名教育家,作者读了《雷沛鸿教育文选》感受颇佳。本文着重对国民教育思想进行体会,从五个方面,即国民教育的作用、国民教育的对象、国民教
在注册会计师税法考试中,包装物押金的税务处理是学习的难点,它在增值税、消费税、企业所得税的征收方面均有所涉及。本文结合税法规定和会计处理方法,详细讲解了包装物押金的有
在应用程序开发中多数时候只处理常规数据,在实际应用中为了实现系统的要求,开发者往往需要根据不同情况实现大数据的处理。本文阐述了在使用PowerBuilder开发应用程序中,如
本文从CIS(CITY IMAGE SYSTEM城市形象系统)专业理论角度出发,结合定位、传播等理论体系,分析了目前国内城市(旅游)形象定位识别的实际案例,并期望从中寻求目前国内城市(旅游