基于Single-Pass算法的微博舆情分析系统设计与实现

来源 :河北大学 | 被引量 : 0次 | 上传用户:liongliong527
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络已经成为人们生活的必需品,网络舆情,特别是微博网络舆情已经具备了极强的社会影响力和极快的社会传播速度。对于提升政府的执政能力而言,做好微博舆情分析意义重大,它可以让政府更加便捷地了解当下社会的时事热点,掌握事件的舆情与发展动态,有助于对各类网络话题加以引导和管控,营造出天朗气清的互联网环境,也为政府作出相关决策收集了民情民意等基础信息。本文通过对新浪微博相关的网络舆情分析技术开展详细研究,在此基础上设计了一个基于Single-Pass算法的微博舆情分析系统并加以实现,包含了微博采集、文本预处理、微博聚类、微博簇摘要及舆情信息显示等模块。本文完成的主要工作包括:1.微博采集和预处理环节,通过微博搜索框自定义话题关键词,对搜索情况页面进行针对性爬取;利用NLPIR分词系统进行中文分词、去停用词以及词性标注;再进行空间向量表示,转化为计算机可识别文本。2.在微博聚类和簇摘要中,选取改进型Single-Pass算法和TF-IDF算法,用于微博文本聚类和获取微博簇特征项及权重,并选取一条合适微博作为微博簇摘要总结。3.通过展示某一话题以天为周期的发布量走势图,按照相似信息总数降序TOP5排列及簇摘要,相关话题发布者粉丝数超过20000用户TOP5降序排列的效果,将微博舆情的有关信息更加直观的呈现到用户眼前,进而达到对微博舆情信息监测和分析的最终结果。
其他文献
中国是世界家具的生产大国和出口大国,家具产值占世界家具产值37%,家具出口居世界第一。本文从企业品牌、技术水平、标准化工作、产业规模、市场流通等方面对中国家具产业发
管仲是中国历史上春秋时期的著名人物。关于其生年问题,学术界一直没有定论。目前主要有颍上说和淄博说、宗谱说三种观点,相对而言,宗谱说比较可信。在没有新的推翻此说的证
回顾性分析我院35例胶原血管病(CVD)合并肺间质纤维化(PF)患者的临床资料。该组患者除有CVD病史或CVD相应特征外,突出的临床症状是胸闷、气短、咳嗽、咳痰,最常见的肺部体征
政府绩效评估最早始于英国,在美国得到大力发展。随着新公共管理运动的开展,现代政府管理越来越重视社会和公民的作用,越来越多的社会组织和公众参与到政府管理活动中来。公
目的观察磷酸铝凝胶、白细胞介素11(IL-11)、地塞米松保留灌肠防治急性放射性直肠炎的临床效果。方法将72例Ⅱ、Ⅲ期直肠癌患者分为观察组和对照组各36例,均行三维适形放疗;
教育惩戒的出发点和目的,是教育人,促进人的发展。因此,教育惩戒的理论研究应该结合教育实际,并且契合人性的基础。随着社会的发展,教育惩戒中的另一个问题更加引人关注,那就是学生
进入21世纪,环境问题已经成为举世关注的热点问题。伴随着人类生态环境的恶化和环境保护事业的发展,环境道德教育被提了出来,并不断地受到重视,日益成为一个方兴未艾的教育领
吕思勉(1884-1957)是一位特立独行的历史学家,在通史、断代史和专门史等诸多领域里都取得了重大成就。本文运用文献研究法和比较史学方法,致力于探讨吕思勉的历史研究特征并
1病例患者,女性,64岁,主因“维持性血液透析1年余,咳嗽、咳痰2周,发热3d”入住我院肾内科治疗。既往糖尿病20余年,冠心病史5年,高血压史4年,血压最高198/90mmHg(1mmHg=0.133kPa)。1年前
在科学技术快速发展的今天,计算机技术、网络技术和通信技术为代表的现代信息技术在教育领域已经开始广泛应用。在传统教育的过程中,理论知识的学习与实验技能的提高之间的矛盾