识别网络论坛虚假评论者的方法研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:epwangke96
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
身处网络时代网络上的各种信息时刻影响着人们对于各种事物的认知。然而这些信息并不完全都是正确无误的。事实上其中有相当一部分是以达到某种利益需要为目的的虚假信息,尤其是随着互联网的蓬勃发展,发布虚假信息形成了黑色产业。所谓的“网络水军”正不断侵蚀着网络的健康,严重影响了人们对于事物的正确认识,甚至在某些时候造成了十分恶劣的社会影响。所以如何识别网络中虚假信息和虚假信息发布者是维持互联网稳定乃至社会稳定的一个重要课题。近年来研究者对于识别虚假信息和虚假信息发布者的研究大多集中在微博,Twitter和Facebook之类的社交网络,对于网络论坛的研究较少,所以本文将重点研究如何识别网络论坛中的虚假评论者。为了有效地识别出虚假评论者,我们采用了从易到难,二阶段的识别方案来识别虚假评论者。在第一阶段采用基于机器学习的梯度提升决策树模型来识别初级虚假评论者,该模型的识别准确率达到了98.1%,查全率和查准率也分别达到了99.1%和97.2%。接着在第二阶段使用该模型识别出更多的虚假评论者后结合已识别的虚假评论者使用PageRank等算法计算出三个用户评分,并在此基础上进一步使用聚类分析来识别出更多的虚假评论者尤其是资深虚假评论者。在实验的第二阶段我们在5000多个评论者中又识别出了78个虚假评论者,其中大约有15个资深虚假评论者,效果比较理想。具体方案是我们先对评论内容使用基于词典的方法进行了主题情感分析,得到了每个评论关于各个主题的情感向量,并以此为基础统计得到每个评论者的最高正面/负面品牌情感值在内的多个情感特征并结合用户基本特征和评论的时间窗口特征等作为第一阶段所构建模型的特征输入。在第二阶段计算用户关系图上的用户评分时主题情感向量也被用于计算两个评论的情感距离,我们通过情感距离来判别发表这两个评论的评论者是否是支持关系,反对关系或者是中性关系,并以此为基础构建用户支持关系图,用户反对关系图以及和虚假评论者合谋关系图。接着我们在这三个关系图上使用PageRank等算法计算得到每个评论者的用户支持度,用户反对度以及和虚假评论者的合谋度这三个用户评分。最后使用K-Means聚类来分析这三个用户评分并识别出更多的虚假评论者尤其是资深虚假评论者。最终的方案综合运用了多种Web挖掘技术,包括了分词标注,文本情感分析,有效特征分析,机器学习分类模型,PageRank算法以及聚类算法等,有效地识别出了网络论坛中的虚假评论者。
其他文献
2019年,市场对宏观经济有着比较明确的悲观共识,尤其在贸易摩擦的影响下更加剧了这一情绪。在这一市场背景下,高质量发展显得尤为可贵。从2017年的亏损到2018年的扭亏为盈,再
近些年船舶柴油机朝着高爆发压力发展,高爆压无疑增加了柴油机的机械负荷,对柴油机机体结构强度和可靠性提出了更高的要求。随着计算力学的快速发展,衍生出的有限元法能够在产品开发阶段就对柴油机结构强度进行计算分析,所以有限元计算分析对柴油机产品开发具有重要意义。本文研究对象是一台16缸V型船用四冲程柴油机机体,在产品前期设计开发阶段,非常有必要对机体结构强度进行详尽的计算评估分析,找出结构设计中可能存在的
烟草由于其生长周期较短、适应性相对较强、抗逆性研究透彻、植物特征明显,在分子遗传和生物工程中有着重要的作用。测序技术的快速发展和烟草全基因组序列图谱的释放,为烟草
运用服务营销理论中服务质量和服务质量评价等理论,研究了某供水企业服务质量的特点,并尝试建立一个可行的供水企业服务质量评价体系,以便改进供水企业服务质量。
1病例报告患者女,48岁。因右眼视力突然下降半天,于2010年7月15日我院就诊。患者高血压病史2年,发病时血压180/110mmHg(1mmHg=0.133kPa),平素口服降压药厄贝沙坦氢氯噻嗪片(厄贝
<正> "5S"管理与目视化管理是相辅相成的。在管理推进过程中,加入可视化管理是使推进工作变得简易的良药。同样,可视化管理也可以用"5S"的方法来构筑。目视化管理目视化的使
宋代选人阶层是当时文官群体的重要组成部分,选人的品阶资序经历几次厘革变得颇为复杂。宋代选人的任职由吏部铨选,按资序授以阶官。选人经历限考受荐而改官,改官的程序严格
随着人们生活水平的日益提升,汽车也逐渐变成人们生活中主要的代步工具。在汽车生产过程中,结构件是构成汽车的重要组件,其焊接质量会在很大程度上对汽车的整体质量产生影响,
研究山药浸提物对青春双歧杆菌发酵影响的同时,对青春双歧杆菌发酵山药粗多糖的过程也进行了初步研究.采用严格厌氧Hungate滚管培养方法对双歧杆菌进行培养、发酵.结果表明对青
如今,在以科技为主导地位的社会中,面对科技给我们带来的方便,我们已经无法远离这些科技产品。在科学知识普及过程中,多媒体的运用为其提供了宣传平台,同时也给人们带来更多