基于中文分词的舆情监控系统分析模块的设计与实现

被引量 : 0次 | 上传用户:wsionw47071
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网行业的发展,信息的传播变得越来越迅速,公众对于某个事件进行讨论的成本也越来越低。在这种情况下,对于一个热门事件,不管真实与否,都会被迅速的传播开来。消息的传播成本很低,同时国家对于网络评论还没有很详细的法律去治理,某些对于政府机关的负面舆论,不管真实与否,都会被迅速的传播,对政府机关的形象造成了很严重的影响。为了解决上述的这样一个问题,需要设计并实现一个能够监控网络舆情的系统,这个系统能够在最短的时间内发现尽可能多的舆情内容,并且准确的识别出舆情的内容相关事件、事件的正负面以及舆情相关的个人或者单位。此外,还需要该系统能够将舆情的内容、舆情相关的个人(或者单位)、舆情传播路径等信息形象地展示出来,并且给予一定的舆情状态应对指导。因此,本文设计并实现了基于网络爬虫和中文分词技术的舆情监控系统。首先,本文所涉及的系统的网络爬虫子系统根据配置的网站库从互联网抓取网页内容,将抓取的内容(主要包括网页的标题、正文、URL等)存储在本地;然后,使用基于Spring框架、Hibernate框架搭建的分析系统读取本地存储的网页内容,分析出网页是否有舆情内容,有舆情内容的分析出舆情相关的事件、人物等数据;最后,通过ssh框架搭建的舆情显示系统,将分析后的数据在网页上显示出来。该方案的各个系统之间相辅相成,缺一不可。本文涉及的主要是分析的模块内容,也是本系统内容。如果某一模块出现问题,那么舆情系统都不可能正常的工作。该方案的优点是舆情发现的时效性强、覆盖面广、相关性准确度高。抓取网页模块和分析模块并行工作,基本可以保证舆情在网络上出现的一小时内即可被抓取至本地,半小时内即可分析完成,无延迟的显示了网页上。同时,由于使用了准确的分词器系统,并且设计了一套自有的分析算法,促使可以分析出更为准确的分析结果。最后,前台网页根据客户,在不同的客户页面显示与当前客户相关的数据,同时,前台的筛选规则可以快速而准确地筛选出客户更为关注的数据。
其他文献
知识密集型企业是一个以科技为依托,产品附加值高,生产过程中知识凝结度高的企业。其以知识资本为主要生产要素,围绕着公司的核心技术展开市场运作。知识密集型企业的核心价值主
现代膜结构自出现至今的几十年间,以独特的材料性能和新的结构技术创造了和传统建筑结构不同的建筑形态,具有广阔的应用前景。本文对膜结构在历史建筑的保护与改造中应用的可
教师知识是在不断发展、完善的建构中推动教师专业发展的。教师间协作知识建构的重要性越发的凸显出来,越来越得到教育界的重视,有必要为教师创建一个有利于教师交流与合作的
背景和目的立体定向消融放疗(stereotactic ablative radiotherapy;SABR),又被称为立体定向体部放疗(stereotactic body radiotherapy;SBRT)作为一种最新的放疗技术已经应用
本文主要通过荧光光谱、紫外可见光谱、同步荧光光谱、三维荧光光谱和分子模拟等方法在近生理条件下研究了胃蛋白酶与三种核苷类似物(胞嘧啶核苷,FNC以及胞苷酸),人血清蛋白
病毒性心肌炎(Viral myocarditis,VMC)是由病毒感染引起的局限性或弥漫性心肌病变。近年来统计说明,病毒性心肌炎是儿童和青少年死亡的重要原因之一,在儿童和青少年发病中呈
<正> 血液粘稠度是血液流变学的一部份。血液粘稠度增高与祖国医学瘀血证有着密切关系,为深入探索血液粘稠度的变化和各种血瘀证的关系及其临床实用价值,我院两年来对300例中
<正>在《义务教育语文课程标准》中,"关注"和"尊重"毫无疑问属于两个高频词和关键词。基于"工具性与人文性的有机结合"的学科特点和实现"学习语言文字运用"的学科目标,这两个
股东代表诉讼制度的出现对于改善公司治理和保障股东权益具有重要的意义,它是一种独特的司法救济方式,它既具有对侵害公司利益的违法行为的抑制功能,又具有公司利益受损的修
小学数学“综合与实践”在新课程改革背景之下出现在人们的视野之中,成为了一大亮点。与此同时也给一线数学教师提出了一个不小的挑战。通过调查发现,在实际教学过程中,存在