社交媒体数据分析平台的设计与实现

被引量 : 5次 | 上传用户:chris_1988
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
社交媒体迅速发展,无处不在。人们利用社交媒体分享自己的生活见闻,发表对事物的意见、观点及经验。新浪微博等社交媒体产生大量的第一手消费者信息,越来越多的数据变得触手可得。目前,许多企业把社交媒体当作一个推广渠道,并没有充分利用社交媒体产生的有关消费人群的大量数据信息。本系统以新浪微博为主,首先,利用其API以一种基于分布式的数据采集方式获取社交媒体数据。其次,将获取到的数据通过Hadoop实现数据存储分析,实现Hadoop与Solr相结合并充分地发挥了两者的长处。由于使用Hadoop的预先分词技术和分布式结构,使得Solr搜索引擎的索引生成得到了高效的优化。最后,经过对社交媒体数据分析后,实现分析结果可视化。本文针对新浪微博产生的数据,设计实现了社交媒体数据分析系统。该系统主要负责新浪微博等社交媒体数据的获取和分析,主要任务是建设Hadoop平台,实现微博数据获取的分布式计算系统;建设网站实现数据分析。数据分析实现的功能主要包括社会关系网络分析、用户群分析、用户情感分析、客户城市地图、话题趋势分析等。本文对社交媒体数据分析系统的项目背景和国内外发展现状进行了阐述,讲述了本系统的社会价值和潜在的商业价值,接着详细分析和研究了社交媒体数据分析平台项目中用到的关键技术,然后对该系统进行了业务分析和功能分析,研究了其功能性需求和非功能性需求,以综上分析为基础描述了本项目的总体架构设计和功能模块划分,并且对各功能模块的详细设计与实现进行了阐述。本人在该系统的生命周期中参与了需求分析、概要设计、详细设计、开发测试工作,主要负责社交关系网络分析模块、用户群分析模块、用户情感分析模块、客户城市地图模块。本系统已经通过公司内测。本人设计实现的功能模块均能够正常运行,并且各模块的运行情况与用户需求相符合。
其他文献
为研究钾盐对发射药静态燃烧烟焰性能的影响,以含钾盐的发射药样品为对象,采用单幅放大彩色摄影法、微热电偶测温法以及双光路透射率系统,研究了硫酸钾(K2SO4)、硝酸钾(KNO3)、新
<正>创新方法的应用推广无疑成为企业创新的助推器,创新方法大赛也成为检阅企业创新水平、科技人员创新能力、创新方法推广工作效果的大舞台,为全国企业创新创业工作注入了活
技术进步在为全球油气行业持续发展提供资源保障的同时,也提高了其增产降本的能力。
造成软件项目失败的原因经过一些机构的调查,根据调查报告显示结果来看,需求规格不充分和需求的改变占有很大比例。所以项目需求是项目开发的基础,对于软件项目的开发,无论采
为利用农林废弃物和环境保护,以稻秸秆粉、稻壳粉、木粉、竹粉及稻秸秆与木粉的混合粉为填充材料,以PP膜为基体材料,采用层铺模压和混炼模压2种成型方法制备不同填料PP木塑复
绿色意味着健康、无公害。随着全球环境污染、生态破坏、能源危机等问题的日益凸显,“生态、环保、节能、低碳”等理念逐步影响政府决策。医疗部门作为国家经济领域的重要组
目的探讨上消化道出血的常见病因,总结护理体会。方法对2015年1月—2016年1月我院收治的上消化道出血患者120例常见病因进行分析,总结护理方法。结果导致上消化道出血的常见
针对室内复杂环境下的稠密三维建模问题,提出一种基于RGB-D相机的移动机器人同时定位与三维地图创建方法.该方法利用架设在移动机器人上的RGB-D相机获取环境信息,根据点云和
针对监管技术落后、产品售价低等因素造成的农资流通体系尤其是信息链不健全问题,该文利用RFID(radio frequency identification)和网屏或二维码相结合的混合编码模式,提出了
针对机械臂运行过程中存在的碰撞问题,提出一种基于速度修正项的机械臂避障路径规划方法.利用B样条曲线进行机械臂关节空间规划,使机械臂能够在特定时刻运行到指定构型.在运