基于Hadoop的智能调度云数据中心关键技术研究

来源 :华北电力大学 | 被引量 : 0次 | 上传用户:lzl2008000
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
电网调度系统是整个电力系统的中枢。我国电网互联程度的不断提高以及智能电网建设过程的逐步推进,给现有的电网调度系统带来了极大的挑战。其主要挑战就来自于现有的电力计算平台,其计算与存储能力已经无法满足电网发展的需求,考虑到电网发展的计算平台计算及存储能力不断增长的趋势,建设具有海量数据计算和存储的智能电网调度系统已迫在眉睫。首先,本文在结合我国现有电网调度体系的基础上,提出了基于云计算的智能电网调度系统新架构以及云计算数据中心的体系结构,从宏观上对整个智能电网调度体系结构进行了规划。其次,本文针对智能电网调度云数据中心的三个关键问题进行了重点研究。第一、云数据中心内部网络结构。在分析对比传统网络结构算法以及最新提出的BCube、DCell数据中心网络结构算法的前提下,提出了更具有扩展性、容错性的PCube网络结构算法;第二、Hadoop云平台的副本存储策略。针对Hadoop现有副本存放策略的不足,本文研究目前学者提出HDFS改进存储策略——CoHadoop副本存储策略,并在此基础上对其智能性加以改进,依靠FP数组挖掘算法对Locator的相关性进行定义,完善了CoHadoop算法的性能,使其更好的适合智能电网调度系统中事务数据集大而稀疏的特点;第三、Hadoop云平台的任务调度策略。本文改进了现有Hadoop平台的公平调度算法,基于模拟退火策略对任务选取进行优化以适合智能电网调度系统任务多、优先级区分明显等特点。最后,为验证相关算法的有效性,随着研究过程的进行,本文分别对网络结构算法进行模拟实验,验证了其扩展性、容错性等关键特性;之后为验证Hadoop副本存储策略和任务调度算法的性能,本文借助一个已有云计算平台搭建了Hadoop集群,对相关实验环境进行了模拟并运行了相关算法实例,验证了算法的有效性。
其他文献
西安是丝绸之路经济带的起点城市,地处我国地理中心,连通着国家东西、南北两条铁路运输大通道,汇聚着国家5条高速公路,开辟通航点达100个、国际(地区)航线12条,与资源丰富的西部地区
报纸
通过砂培试验,研究了水稻根系和地上部分(苗)对局部根系供应氮素的适应性变化。局部根系供应氮素对水稻根系形态,生物量及碳、氮分配有明显的影响。无论供氮量高低,供氮一侧
如今无人驾驶技术逐渐得到广泛的关注,目前针对无人驾驶技术的研究都是着力于调通各个职能模块、优化智能算法以及最后无人驾驶汽车的落地。行人检测技术作为其中重要的组成
伴随着信息技术的高速发展以及全球数据的爆发式增长,大数据对科学研究、经济建设、社会发展和文化生活等各个领域正在产生革命性的影响,数据已成为促进现代经济社会发展的关
近年来,随着金融一体化的深入,全球银行保险发展越来越迅速;我国保险市场也在2000年引入了银行保险理念。陕西保险市场近年来发展迅速,保险主体越来越多,竞争日益加剧。在这
根据职业岗位与专业培养目标,建筑工程技术专业实践教学体系的实施可以分为单项实训和综合实训。通过单项实训,使学生的基础操作技能得到有效的夯实通过综合实训,全面提高学
操纵证券市场行为是金融市场的一个常见问题,制约着金融市场的健康发展,制约着我国经济的健康发展。本文从操纵证券市场行政处罚案例入手展开研究,通过实证分析,分析我国操纵
<正> 美国有线电视服务公司Comcast日前宣布,该公司计划收购沃特·迪斯尼公司。他们为这项恶意收购的出价为每0.78股Comcast股份交换一股迪斯尼股份。照此计算,此次收购的出
在当前建筑工程项目施工中,节能环保绿色装饰材料的应用已经成为未来建筑工程项目装饰的主要发展方向,不仅能降低建筑施工对周围环境的污染,也是体现我国绿色发展理念的主要
【目的】探讨无肌松维持全凭静脉麻醉用于经皮肾镜碎石术的安全性和有效性。【方法】将180例择期行经皮肾镜碎石术的患者随机分成插管后肌松维持组(I组)及插管后无肌松维持组(II