【摘 要】
:
随着互联网的迅猛发展,社交网络成为人们生活中越来越密不可分的一部分。以新浪微博为代表的社交媒体平台,已逐渐成为人们发表观点、表达思想的重要平台。人们在微博平台中发表内容以及相互关注、点赞、评论和转发的网络行为,刻画了人们在社交媒体中的用户关系网络。因此,用户社团关系网络挖掘,对微博网络管理具有重要意义。本文研究并实现了 一个基于微博用户之间行为特征和内容特征进行社团关系挖掘的系统。相关研究工作如下
论文部分内容阅读
随着互联网的迅猛发展,社交网络成为人们生活中越来越密不可分的一部分。以新浪微博为代表的社交媒体平台,已逐渐成为人们发表观点、表达思想的重要平台。人们在微博平台中发表内容以及相互关注、点赞、评论和转发的网络行为,刻画了人们在社交媒体中的用户关系网络。因此,用户社团关系网络挖掘,对微博网络管理具有重要意义。本文研究并实现了 一个基于微博用户之间行为特征和内容特征进行社团关系挖掘的系统。相关研究工作如下:1.构建分布式爬虫系统,爬取微博平台中所有用户信息,其中包括个人信息、微博文本、微博点赞、评论和转发以及用户关注和粉丝等结构化和非结构化数据。通过设计合理的数据库表结构,将海量用户数据整理聚合到HBase中。2.基于微博网络中用户发表内容和用户间的交互行为,提出基于深度自编码器的多维度用户关系网络挖掘模型,解决传统社团挖掘模型中仅对使用单一“关注”关系构建的用户关系网络进行社团挖掘问题。其中,在内容维度特征提取中,本文采用基于注意力机制的卷积神经网络CNN模型,解决微博文本篇幅短小等问题,同时从“关注”、“点赞”、“评论”、“转发”四个动作中,对行为维度特征矩阵进行构建。3.基于本文提出的社团挖掘模型,系统采用离线计算和在线计算分离模式,将离线计算定时对采集的用户信息进行社团挖掘,在线计算响应用户请求,快速查询社团挖掘结果,并进行社团内部结构分析后将结果返回至前端系统,前端系统进行可视化展示。为保证在线计算响应时间,本文采用基于MapReduce的用户属性倒排索引+Solr-HBase二级索引结合方式,加快数据检索速度,并采用数据缓存、负载均衡和故障切换技术手段,保证在线计算提供可靠服务。
其他文献
煤与瓦斯突出是多年来威胁煤矿安全生产的一个重大技术难题,尤其是近几年来,随着煤矿开采技术难度的不断增加,瓦斯威胁更趋严重。山西东于煤业有限公司主要开采03、2、4号煤,由于东于煤矿为高瓦斯矿井,因此对东于煤业有限公司03、2、4号煤层煤与瓦斯突出危险性进行鉴定和评价,能够避免瓦斯治理工作的盲目性,确保矿井的安全生产。本文首先基于东于煤业有限公司的生产概况,对东于煤业有限公司的生产现状进行了概述,包
随着我国社会经济的快速发展和人民生活水平的普遍提升,城乡生活垃圾产生量也迅速增加。鉴于目前国内垃圾处理技术不成熟、建设规划不完善、处理能力不足等因素的影响,“垃圾围城”现象普遍存在。这不仅会污染环境,影响正常生产生活秩序,而且与建设美丽中国的愿景相悖。因此,生活垃圾的规范、有效处置已成为各级政府及广大群众迫切要求解决的社会问题。相较于传统的卫生填埋、堆肥等垃圾处置手段,垃圾焚烧发电技术因其占地小、
公路桥梁基础冲刷监测一直是公路运营管养部门的工作重点之一,特别是山区公路桥梁的管养,存在诸多不便和突发问题。特别是,当雨季来临,山洪暴发时,如果桥梁基础冲刷状况未能及时探明,危险桥梁不能在第一时间被识别出来,而使其依然处于正常的工作状态,就可能导致桥梁损毁、坍塌,酿成重特大安全事故,造成人员及财产损失。为加快公路管养信息化建设,推进信息化进程,健全安全防范网络,提高公路主管部门管理水平,减少山区运
中国经济经历了开国初期的计划经济到后面改革开放倡导的市场经济,我国的市场经营主体也越来越丰富。为了更好激活市场,需要调动国内外资本支持实体经济发展。作为融资平台之一的券商应运而生,券商从仅能够提供单一的投资方式,逐渐适应市场需求提出各种组合投资方案。且随着国内经济的进一步发展,我国发展需要更多的资本参与,另一方面不少国内投资者在积累了一定财富后也需要对自己的资产进行投资和管理,但是这个群体中由于缺
装配式凸轮轴是用于汽车发动机配气机构的重要零部件,与整体式凸轮轴相比,具有重量轻、材料分体优化,性能好、结构设计灵活等特点,已经越来越多的应用于高端汽车发动机的生产制作中。对于装配式凸轮轴,其凸轮的设计和制造方式,是近年来研究的热点方向之一。凸轮型面要求加工精度高,凸轮在工况条件下,表面受到剧烈的摩擦,芯部则受到周期性载荷的作用,因此,对于凸轮零部件,要求具有较高的强度、耐磨性、芯部韧性以及耐疲劳
唑啉草酯是由瑞士先正达作物保护有限公司研发的一款乙酰辅酶A羧化酶(ACC)抑制剂类除草剂,是现代农药中禾本科类杂草防治领域的新型材料。唑啉草酯因其特殊的苯基吡唑啉类结构属于全新的除草作用靶点,它的开发解决了近几十年来麦田禾木科杂草对于AOPP类除草剂的抗性问题。同时,唑啉草酯可以配合新一代农业新材料一起使用,从而增强除草效果的稳定性。本论文设计的制备路线重点在于合成关键中间体(2,6-二乙基-4-
色彩拥有比图形和文字更为直观的表现能力,与其说这是色彩本身的力量,更不如说这是现代信息社会大量信息充斥的必然结果。人们越来越多的依赖于移动端设备获取日常信息,但信息筛选器的主要研究分类仍然集中在图形和交互设计上。因此,本文在移动端信息筛选中探究现有关键性因素的基础上,分析色彩在其中的作用与意义,总结了以色彩为引导性的移动端信息筛选的设计方法。并以二十四节气导购平台作为实践主题,设计了相关的信息筛选
营养治疗的原则根据病程不同分为三个阶段,分别命名为Ⅰ甲、Ⅰ乙、1号三种治疗饮食。抗溃疡第一阶段(治疗饮食Ⅰ甲): 饮食原则:严格限制对胃粘膜的机械性及化学性刺激物,保护
随着海洋世纪的来临,人们对海洋资源的开发和海洋环境的探索逐渐深入,海洋研究的重要性日益凸显。温盐深传感器,简称CTD(温度T、电导率C、深度D)是研究海洋物理特性的重要工具。温盐深传感器可以精确的测量海水温度、电导率和压力等参数,利用这些参数,又可以进行海水的盐度、深度、密度以及其他特性的计算。由于温盐深传感器是以电子元件为主的观测仪器并且应用在复杂的海洋环境中,所得到的测量数据往往会受到不同因素
直流线路分压器是特高压直流输电中的重要设备,近年来南方电网系统内多次出现由于直流线路分压器测量异常导致直流非计划停运事件。直流线路分压器测量异常对直流控制保护影响较为复杂,目前还无法快速定位直流线路分压器问题是整流站还是逆变站。同时直流线路分压器测量异常现场检测也相当复杂,目前也没有针对直流分压器现场检测的方法,因此有必要针对直流线路分压器测量异常对直流控制保护影响开展深入分析,并针对直流线路分压