【摘 要】
:
随着电力企业的快速发展,电网数据不断积累,呈现出爆炸式增长的趋势。怎样从这些数据中挖掘出价值数据,已经成为智能电网建设和电力企业发展的关键,而大数据相关技术的飞速发
论文部分内容阅读
随着电力企业的快速发展,电网数据不断积累,呈现出爆炸式增长的趋势。怎样从这些数据中挖掘出价值数据,已经成为智能电网建设和电力企业发展的关键,而大数据相关技术的飞速发展为电网数据带来新机遇。在当下主流的大数据技术中,相比Hadoop平台,Spark平台更加优异的迭代工作负载性能、RDD数据集的高速计算能力以及HDFS的强大存储能力在海量的电力数据挖掘中都表现出极大的优势。本文利用Spark平台与关联规则挖掘技术结合的优势,根据电力企业对数据分析的实际需求,研究分析了Z-score标准化和FCM聚类算法,结合两者设计出电力数据预处理流程,验证了数据预处理的有效性,并运用稀疏矩阵和FCM聚类算法改进了FFP-growth算法,应用于Spark平台下的电力营销系统中。本文主要完成了以下三方面工作:第一,研究实际处理电网数据中遇到的问题,并针对这些问题提出解决方法,根据Z-score标准化和FCM聚类算法的结合提出大数据预处理的新流程;第二,研究了FP-growth关联规则挖掘算法,根据传统FP-Growth算法的不足对其进行改进,引入稀疏矩阵存储减少一次数据库扫描得到频繁项集,节省了数据库扫描时间,并设计了在Spark平台下改进的FFP-growth算法并行化模型,对数据进行二次分类,避免单个事务集过大的问题;第三,搭建Spark平台,设计并实现电力营销系统,将数据预处理技术和改进的FFP-Growth关联规则挖掘技术应用到电力营销数据分析系统中,实例验证了重新设计的数据预处理流程和改进的并行关联规则挖掘算法在电力营销数据分析中的有效性。
其他文献
本文设计开发了一台老年人下肢伸屈训练装置,包括其机械结构和电气系统;求解了抗阻训练人机动力学模型;设计了基于模糊滑模算法的抗阻训练控制器策略并仿真;利用BP神经PID算
目的 探讨成人急性髓系白血病患者化疗后发生院内感染的影响因素。方法 回顾性分析延安大学附属医院2015年3月至2018年6月收治的124例发生院内感染的成人急性白血病患者的临
在目前社会主义新农村的建设热潮中,新农村自建住宅设计需求量很大。随着国内互联网业务的蓬勃发展,以及乡村网络的覆盖,不同类型的网络设计机构或者个体应仍而生,成为新农村
非编码RNA(noncoding RNA,ncRNA)是一类缺乏保守性开放阅读框、不编码蛋白质的一类RNA的总称。建立高效快速的筛选ncRNA方法将能更深入的研究ncRNA。长片段ncRNA在自然条件下易
目的:观察温和灸治疗前后2型糖尿病合并骨质疏松患者血清中OPG、RANKL和DKK-1蛋白表达的变化情况,探讨温和灸背俞穴对2型糖尿病合并骨质疏松患者的临床疗效。方法:选取12例糖尿
乒乓球运动中的弧圈球技术是一种较为成熟的进攻技术,弧圈球技术是速度和旋转相结合的技术,在击球速度、力量、旋转和弧线上都较有优势。乒乓球运动员重视弧圈球的原因主要是其具有上旋性强、稳定性高的特点,同时具有较好的飞行弧线。随着乒乓球运动项目的发展,乒乓球运动呈现出“比赛节奏加快、接发球速度加快、比分变化快、进入节奏快、体能消耗大”的“四快一大”的乒乓球运动项目特点。乒乓球正手弧圈球技术在比赛中是最为常
当前全球反恐形势日趋复杂,本文分析了《中华人民共和国反恐怖主义法》颁布对我国履行国际反恐义务和开展反恐工作产生的积极意义,介绍了空港口岸检验检疫机关行使反恐职能的
"理性"与"人本"不仅是哲学领域中的重要概念,同时也是哲学发展进程中的两条主要路线。在理性主义哲学观和人本主义哲学观的影响下,这一概念势必会产生"理性主义"的教育观和"
随着英语写作教学从成品写作法向过程写作法的转变,对英语写作的评估也出现了从终结性评估到形成性评估的发展趋势。基于过程写作法的形成性评估在在教育评估中很受欢迎,但是
随着电能质量研究的不断深入和电能质量监测网络的不断扩大,电能质量监测信息的价值已经不止于在电能质量研究领域,同时电力系统丰富的监测系统各自具备相应的数据特征优势,