【摘 要】
:
微博是近年出现的新型互联网信息交流平台,它具有主题分散、体量短小、文体自由等特性,它能对社会产生巨大的影响,所以信息监管部门和商业企业对基于微博信息的舆情分析都有
论文部分内容阅读
微博是近年出现的新型互联网信息交流平台,它具有主题分散、体量短小、文体自由等特性,它能对社会产生巨大的影响,所以信息监管部门和商业企业对基于微博信息的舆情分析都有迫切需求。由于微博的自身特点,这决定了一般的网络舆情分析技术不再满足微博的研究,对此需要做出改进和调整。随着微博的快速发展和流行,基于微博的舆情分析已经逐渐成为一个热门的研究方向。本文根据微博的特性,提出了基于词类和搭配的微博舆情文本聚类方法,文章的主要包括:(1)文章首先对舆情分析的相关技术做出综述,说明了目前数据采集的几种方法,接着阐述了文本预处理中的经典分词系统和相关的一些算法,最后对各种分词算法的优势和缺陷作出比较和分析,在这前提下介绍了本文采用的分词工具ICTCLAS及其优势。(2)文本聚类是本文研究的重点,根据前人的研究可以知道,向量空间模型(VSM)无法表示具有语义关系的词语,比如近义词和多义词等。本文利用词类模型来描述文本,该模型的词义归纳技术使用的是LDA(Latent Dirichlet Allocation)主题模型,解决了文本表示时的高维向量向低维向量转化的问题。利用文本中的词语搭配技术不仅可以明确研究主题而且可以文本间的相似度计算更加方便,本文提出了基于对数似然比和熵结合的自动抽取搭配的方法来识别词语间的搭配关系,实验表明该方法有良好性能。(3)在传统K均值文本聚类的基础上同时根据微博的特性,提出了基于词类和搭配的微博文本聚类算法,并将该算法同前人提出的基于词类的文本聚类方法以及传统K-Means算法进行大量实验对比以及分析,显示了该算法的有效性。实验证明利用词类文本聚类方法比传统文本聚类方法性能提高6.3%,而本文方法比利用词类文本聚类方法性能提升了16.8%,结果显示了本方法的有效性。
其他文献
动画专业是与时代同步的专业,对创新性的人才要求极高,许多优秀的毕业生毕业设计是其职业生涯中最为精彩的一个部分,因此,毕业设计具有不可替代的作用。创新型的动画专业人才
警务汉语教学是专门用途汉语教学的新兴分支。本文以禁毒案件为例,使用NLPIR汉语分词系统和语料库检索软件BFSU PowerConc1.0统计禁毒案件高频词作为参照,与现有警务汉语教材
高致病性猪蓝耳病又称蓝耳病,是由呼吸综合征病毒变异株所导致的,死亡率相对较高。如果猪仔感染了蓝耳病病毒,其发病率可达100%,而且感染病的死亡率也会较高,可达50%以上。
糖尿病肾病(DN)是糖尿病(DM)最严重和常见的慢性微血管并发症之一,目前已跃居为终末期肾病的首位原因,也是DM患者的重要死亡原因之一。对于DN的中医药治疗,近现代中医界研究
房地产行业在我国曾被认为是暴利行业,随着近年来国家的宏观调控,房地产市场日渐萎靡,房地产企业的生存和发展面临着严峻考验,房地产开发企业的黄金时代已经一去不复返,因此
目的:观察口服筋骨痛消丸配合外用七珠展筋散治疗肩周炎的疗效。方法:60例病人随机分为治疗组和对照组,进行了用药前后疼痛程度评分、肩关节活动度的对比,观察药物的疗效。结
目的:观察辨证使用中药注射液治疗缺血性脑卒中与单纯活血化瘀中药针剂治疗缺血性脑卒中的临床疗效。方法:选择120例缺血性脑卒中患者,随机分为2组,在西医常规治疗的基础上,
目的:了解经历重大创伤事件,创伤后应激障碍(PTSD)患者中述情障碍的发生情况,经历过创伤未发生PTSD的创伤暴露者述情障碍的发生情况,及正常人群中述情障碍的发生情况,并研究
在国家“十二五”计划的大背景之下,吉林省战略新兴产业发展计划的实施中,先进装备制造业在整个发展计划和战略实施中占有很大的比重,因此针对先进装备制造业的先进性进行相
基于移动终端具有移动性、灵活性等优点,提出一种基于Android的电力安全风险现场监控系统。应用该软件系统,用户可在作业过程中对指导书进行实时查看与操作,对作业现场进行实