【摘 要】
:
随着信息技术的进步,大数据时代已经到来,在这样一个信息爆炸的时代,谁能全面、有效的掌握信息谁就能在竞争中获取优势。因此在信息时代,能准确获取与及时了解热点信息的发展
论文部分内容阅读
随着信息技术的进步,大数据时代已经到来,在这样一个信息爆炸的时代,谁能全面、有效的掌握信息谁就能在竞争中获取优势。因此在信息时代,能准确获取与及时了解热点信息的发展相当重要。舆情监控系统就是利用飞速发展的计算机技术对网络上的一些舆情信息、资料进行自动的分析与整理,建立有效的、全面的、快速的监控机制。政府或者企业单位可以利用舆情监控系统了解社会的舆情热点、舆情发展、舆情动向从而及早地针对舆情事情发展的趋势,建立相对应的策略和方针,引导事情逐步向积极的、好的方向发展。本文通过阅读大量文献并汇集整理信息,根据互联网的发展现状,分析、设计、并实现了一个基于云平台的舆情监测系统。分析阶段考虑系统的目的和背景,分析了舆情监测系统应该具备的功能和特点,并结合现有的技术和系统实现的难度从经济、技术及可操作性上对系统需求进行分析。设计阶段在需求分析的基础上,紧紧围绕舆情监测的核心点,将系统的功能进行合理划分,将系统的结构和模块设计得更为详细具体,并从系统的角度,进行了安全和管理的设计。实现阶段是全文的重点,在设计的基础上对系统的模块分别进行实现,为了全面、准确的获取信息和分析信息,并使系统灵活性更强,本文采用基于Hadoop的基础云平台作为信息的获取和分析平台,Hadoop云平台的计算框架MapRedce,可以把任务Map到各个节点上去分布式的执行,最后把所有子任务通过Reduce方式再合并成最终结果。该计算框架不仅并行化程度高,且能把任务较均匀地分配到物理位置不同的各个机器上去执行,从而能更全面、准确地获取和分析数据。本文利用HDFS对非结构化数据进行存储,既能有效存储数据又能利用HDFS策略备份数据,从而保证了数据的安全性。通过对Hadoop计算节点进行删除和扩充,能很容易控制和调节系统的数据处理能力。最后本文对系统进行测试验与验证,并给出测试结果。
其他文献
<正>在《人类简史》中,作者尤瓦尔·赫拉利对一个宏大的追问着迷不已:人类是如何由智人个体,到被组织起来,再到融合统一的?具体来说,人类历史上类似于城市、帝国等"大型合作
螺旋机构是《机械设计基础》课程中讲授的常用机构之一,其主要内容是关于螺旋副的受力分析。本文根据实际讲授经验,介绍了螺旋机构的教学设计。实践表明,基于该教学设计的讲
本研究旨在通过基因重组技术构建真核表达载体,使天蚕素CecropinB基因在奶山羊乳腺上皮细胞中表达,建立抗菌肽防治哺乳动物乳腺炎的转基因技术基础。另外本研究所构建的真核
光电探测器在光通信、全彩成像、机器视觉、医疗电子设备以及昼夜监视等许多领域都有着重要应用。目前占主导地位的是基于无机半导体的光电探测器,虽然具有性能上的优势,但也存在着诸如工艺复杂、成本高昂和缺乏柔性等不足之处,在需要窄带响应的系统中则需要增加滤光片。而有机光电探测器则因其具有易调节的响应光谱范围、柔性和低成本的制作工艺等优势逐渐引起人们的关注。然而,大多数有机光电探测器都只对可见光有响应,近红外
目的研究甘露聚糖肽对口腔黏膜病患者的临床疗效及淋巴细胞活性的影响。方法本次筛选2015年6月至2016年6月在我院治疗的98例口腔黏膜病患者作为研究对象,随机分为常规组和治
目的:观察升降脾胃法对3、4期慢性肾脏病之浊毒中阻、胃失和降证的临床疗效和安全性,为临床治疗提供新的思路。方法:将符合纳入标准的60例患者,随机方式分为试验组与对照组各
随着我国城市建设的大力发展,高层建筑越来越多,建筑脚手架作为施工作业中必不可少的关键设备,其复杂的结构形式及应用技术已成为衡量建筑工程发展中的重要标志之一。本文对
<正>一、高考试题分析例1(2014年重庆卷第11题)氢能是最重要的新能源。储氢作为氢能利用的关键技术,是当前关注的热点之一。(1)氢气是清洁能源,其燃烧产物为。(2)NaBH4是一种
发展以日光温室果蔬生产为主的设施农业,是武威市发展现代农业,实现农业增效、农民增收的重要举措。日光温室人参果是武威市因地制宜发展起来具有地域优势的特色产业。由于该
背景和目的:支气管哮喘是一种复杂的气道反应综合征,以气道阻塞、气道炎症和气道高反应性为特点。目前的很多研究表明,T细胞在哮喘的发生和发展过程中发挥了重要的作用。T细胞