基于Hadoop平台电能质量监测系统的设计与研究

来源 :中国矿业大学 | 被引量 : 0次 | 上传用户:zlp_dream
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科技的发展,电能作为现代社会不可缺少的一部分,其质量的好坏成为衡量国家技术发展水平的重要指标。电能质量监测数据对电网的分析与治理起着至关重要的作用。由于电网规模的扩张、电能质量监测系统采集装置采样频率的提高以及监测范围不断的扩大,导致电能质量监测系统采集的数据量不断增大。传统的电能质量监测系统都是基于调度中心的集中式计算平台,无法存储和处理海量的电能质量数据。本文利用Hadoop平台对传统的电能质量监测系统进行改进,解决了海量数据无法存储以及计算处理时间过长的问题。首先介绍了Hadoop平台的HDFS分布式文件系统、MapReduce并行计算框架以及HBase分布式数据库,并搭建了Hadoop集群平台。针对传统电能质量监测系统的弊端,提出基于Hadoop平台电能质量监测系统,并给出了该系统具体的架构及优势。其次分析了数据存储与处理相关技术,对系统默认的数据分布策略和数据连接算法进行改进。将多副本一致性哈希算法与HashMapJoin并行连接算法结合使用在该平台,增大了数据本地化程度,节约了网络带宽资源,提高了数据连接查询的效率,增强了系统的性能。另外还对系统涉及到的其他技术进行简单介绍,对影响系统性能的负载均衡、数据块尺寸、集群的高可用进行了设置与优化。最后设计了相关实验,对多副本一致性哈希算法的可行性、数据存储的快速性、算法优化前后的平台对数据并行处理的高效性以及集群的高可靠性等方面进行验证。通过对电能质量数据的处理,验证了基于Hadoop平台电能质量监测系统的可用性。
其他文献
紧凑城市以实现土地与能源节约、防止城市无序蔓延、提高城市运行效率为最终目标。从空间利用、社会发展、环境生态等三大方面构建指标体系,运用熵值法和多元逐步回归线性模
以河北省冬小麦种植区域为研究区,基于TM和MODIS遥感数据,利用植被供水指数法确定了研究区旱情等级。首先,将其与遥感解译获得的冬小麦空间分布图叠加得到受灾冬小麦空间分布图;
古斯-汉欣位移是一种反常的光学现象,当一束有限横截面积的光束在不同折射率的两种介质界面发生全反射时将产生一个侧向的位移,也就是说反射点和入射点不在同一点,此位移就称
描述了应用SURF算法提取图像描述因子的过程。利用描述因子可以将其作为计算机的可识别点来匹配图像信息,介绍了图像处理常用的三种方法,并根据现场需求分析、对比三种方法的
在当今旅游国际化的大背景下,湖湘文化旅游业正以前所未有的强劲势头走向世界。然而,就目前湖湘涉外旅游的英语翻译文本而言,错误的现象层出不穷。文章从剖析湖湘旅游典型的
10月30日,中央四川省委、省政府在成都召开了“四川省中医药发展大会”。
基于非相干泵浦四能级原子系统,提出了一种调控增强古斯-汉欣位移的新方法,实现了负折射率效应。研究结果表明:选取合适的驱动场拉比频率、场失谐量及入射角,可以使古斯-汉欣
介绍了肥东县江淮分水岭地区结构调整的重点和应遵循的原则,并提出了结构调整应做好的几个结合。
左炔诺孕酮宫内缓释系统是一种安全、高效的宫内节育器,近年来还被用于治疗月经过多等妇科疾病并取得较好的效果,但其主要不良反应即子宫内膜的不规则突破性出血至今仍未妥善