基于Hive的智慧城市数据处理技术研究与实现

来源 :计算机技术与发展 | 被引量 : 0次 | 上传用户:ersand
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
对智慧城市系统中产生的大量数据进行有效的采集、合理的存储、高效精准的分析,进而对决策的做出提供合理的支持是在智慧城市建设过程中必须要解决的问题。对此,在充分理解智慧园区数据分析系统功能需求、性能需求的基础上,结合当前比较主流的数据分析方面的技术,提出了Kettle+Hive+Tableau的智慧园区数据分析解决方案。该系统具有较高的可用性、稳定性、效率以及非常高的扩展性、可移植性,不仅适合于对智慧园区的数据分析,还普遍适用于对智能化信息系统数据进行分析,具有较高的普适性、通用性。该系统通过ETL工具、数据可视化工具的应用,尽量减少在数据分析系统开发过程中代码的编写,能够适用于绝大部分有数据分析需求并且数据量较大的信息化系统。
其他文献
学生对小数并不感到陌生,物品价格、质量等都有小数的体现,课堂教学中,教师往往倾向于将小数与生活实际相联系,可学生在理解小数的意义上仍存在诸多困难。因此,《小数的意义
0引言电力系统一次设备倒闸操作的"五防"要求很早就已经提出,实现该要求的技术手段从最原始的机械挂锁到机械程序锁、电磁锁、电气闭锁直到微机防误,海安变电所系苏北地区的220
早搏,是最常见的心律失常,在生活中我们经常遇到。从早搏产生的部位来分,通常把来源于心房内、房室交界区、心室内的早搏,分别称为房性早搏、交界区性早搏及室性早搏。其中,室性早搏又可以简称为“室早”,在老年人中发病率较高。患了该病并不可怕,可怕的是对它不了解、不重视,从而带来严重后果。下面,我就針对大家对室早的常见疑问进行简略的解答。 1.什么是室早?  我们知道,生理性的心脏跳动节律一般是规整的,如果
本文发表的是我们于1990年在云南天文台利用1mRCC望远镜对天王星主要卫星进行照像观测的定位结果以及与理论计算值进行的比较分析.
以"被遗忘权"为研究对象,利用文义解释、体系解释、比较法考察等方法解析"被遗忘权"的概念、内容和性质。"被遗忘权"是指数据主体要求数据控制者在网络空间内删除、停止传播
语言负迁移是二语习得中的一种常见现象,是影响学习者学习的一个重要因素。文章从语音、词汇、语法、语用四个方面对二语习得中母语负迁移现象进行探讨并提出了几点相应的对
<正>区域游戏是幼儿自主选择、操作、摆弄材料的过程,游戏材料是影响区域游戏质量的关键。丰富而适宜的材料为每一个幼儿提供了活动的条件和表现自己的机会。游戏材料的投放
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”$ MN。W;- __._——————》 砧叫]们羽 制作:陈恬’#陈川个美食 Back to yield