微博热点话题发现技术研究

被引量 : 0次 | 上传用户:gabby11
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,微博的迅猛发展,已经成为人们获取和传播信息的最主要的形式,由微博所引发的社会问题和危机事件也日呈频发态势。如何在纷繁复杂的微博信息发现热点话题,已经成为话题发现和跟踪领域研究领域的热点。同时,微博热点话题的发现,为网络舆情的监管,掌握事件发展动态,都提供有利的数据保证,具有十分重要的理论价值和现实意义。本文首先从微博信息收集入手,针对微博平台上API受限或不稳定等问题,自行设计了网络爬虫工具,并实现了信息收集手动和自动两种方式。其次,本文采用lucene对微博文本信息进行预处理,针对原有向量空间的不足,采用潜在语义分析方法对向量空间进行奇异值分解,达到了降低词袋维度和消除语义噪音等效果。再次,在分析了文本分类的各种算法的优缺点基础上,提出了采用朴素贝叶斯分类算法实现话题发现及跟踪。朴素贝叶斯分类算法是一种非常简单和有效的文本分类算法,计算待分类项出现的条件下,其它已知分类出现的概率,选择概率最大的,将待分类项归为该类。接下来,本文根据微博用户特征,通过lucene关键词的倒排索引,快速找到该关键词所在微博,继而找到该微博用户的关注度,通过词语的关注度,找到微博的关注度,最终计算话题关注度。相对于微博传统计算话题热度的方法,这种算法更多地考虑到微博自身用户特点,所以更有效和准确。最后,基于以上工作,本文实现了微博舆情分析系统,并对实验数据进行了测试,通过对实验结果的分析,找出在研究过程中的有待改进的地方,更加明确了今后研究工作的重点。
其他文献
新中国成立之后,在“一边倒”的倾向前苏联的政策影响之下,我国制定了第一套中学历史教学大纲,在这之后的数十年中,全国一套此标准下的历史教科书。进入二十一世纪,在经济全
至于目前全面提升小学生的语文学习能力,首先需要突破的就是小学生的阅读能力的培养。可以明确展现出来的是要想让小学生的语文水平得到真正的提升,就必须要在阅读能力这一块
针对南淝河流域当前存在的水污染严重的问题,在对水质现状、水量构成和大量现场调查分析的基础上,识别出流域内存在的主要环境问题,提出了相应的治理策略,为南淝河水环境达标
以“建筑静力释放层技术”为代表的“主动”抗浮技术已在诸多重要工程的地下室抗浮中得到应用。实践证明,该抗浮技术具有很高的可靠性及工程经济性。然而,目前游泳池工程中所采
19世纪韩国学术文化宗匠金正喜与清代乾嘉学界名流联系密切,在此基础上形成了与乾嘉学者桴鼓相应,且具有独特之处的学术思想,《实事求是说》是反映其接受、发扬乾嘉学者经学思想
放射治疗是盆腹腔恶性肿瘤局部治疗的有效手段之一,然而放射治疗易导致放射性肠炎,严重影响患者的生活质量。本文从病因病机、辨证论治等方面总结分析了贾英杰教授治疗放射性
现如今,社会市场经济竞争激烈,现代企业唯有将财务会计和管理会计进行融合,才能适者生存。本文先分析了财务会计与管理会计的区别与联系,认识到两者融合的意义,并提出了如何
为实现对电力设备的预知性维修,保证设备的安全可靠运行,利用传感器技术、计算机技术及信号处理技术对电力设备进行在线监测,很好的补充和发展了传统离线预防性试验的停电监测。
作为江苏省竞技体育传统优势项目之一,羽毛球运动近年来得到了飞速而全面的发展。竞技水平得到了很大提升,竞技成绩始终位于全国前列,在十一届全运会中更是取得了男女团体冠军的
最近这几年,随着网络的普及和媒体的催化,以及我国民主法治化进程的深入,司法案件的审理过程渐渐进入了社会公众的视野。特别是在司法改革的大背景下,社会公众对司法案件的审理过