基于强化学习的微电网优化调度研究

来源 :贵州大学 | 被引量 : 0次 | 上传用户:lytmxl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当今世界正面临着化石资源短缺、电力需求飞速增长的能源体系供需不平衡危机,以及全球变暖、臭氧层破坏等生态环境问题。具有节能减排和环境友好特点的可再生能源开始成为促进世界能源经济转型发展的核心,微电网作为一种新兴的发电技术,能够凭借系统本身的控制及能量管理达成功率平衡、系统运行优化等目标。为了充分挖掘微电网的优势,促进可再生能源使用占比的提升,对微电网优化调度展开研究具有十分重要理论和实践意义。本文针对目前的微电网调度优化方法无法对学习到的调度知识进行有效积累和挖掘利用的问题,以包含风光分布式电源、柴油发电机以及蓄电池的典型微电网系统作为研究对象,将自学以及积累知识能力的强化学习引入到微电网优化调度问题中展开研究。首先,本文对强化学习理论进行了研究,概述了强化学习模型建立的基本要素,以及不同类型的强化学习算法的学习原理。其次对典型微电网系统内部单元的运行机理及相关特性进行分析,并构建相适应的数学模型,以及包含柴油发电机燃料费用和微电网与大电网交易费用的运行成本目标函数。然后建立了深度双Q网络和深度确定性策略梯度的微电网优化调度的状态及动作空间、奖励函数的模型,并通过具体算例对所构建的深度双Q网络的微电网优化调度模型以及深度确定性策略梯度的微电网优化调度模型进行有效性验证,通过算例结果得出,深度确定性策略梯度在解决微电网优化调度问题时更具优势,能获得更优的调度策略。随后进一步考虑对积累的调度知识进行有效利用的问题,引入了迁移学习,并将其与深度确定性策略梯度进行结合,提出了基于深度确定性策略梯度和迁移学习的微电网优化调度,在深入分析微电网优化调度问题的基础上,设计了基于实际供需电能需求相似度的知识迁移规则,然后通过具体算例对所提方法进行了仿真验证,结果表明了知识迁移规则的设计和所提方法在实现对调度知识的积累和挖掘利用方面具备有效性。
其他文献
近年来,基于大环(例如环糊精、杯芳烃、瓜环及柱芳烃等)和纳米材料(如石墨烯,g-C3N4,金属纳米等)制备的复合材料现已用于各种领域,尤其是超分子传感器领域,该复合材料结合了大环及纳米材料的优点,改善灵敏度和选择性。因此本论文构建了化学传感器,主要用于检测敌草快和氯霉素。通过原子力显微镜(AFM),红外光谱(IR)和拉曼光谱的全面表征,合成了Benzo[6]uril杂化氧化石墨烯复合物,将该复合物
随着分布式能源渗透率的提高以及高品质负荷日益增加,对网源荷协同控制的技术需求日趋迫切。然而,传统配电网的“闭环设计、开环运行”结构不能友好接入大规模分布式能源,难以满足重要负荷的高可靠性供电需求。柔性互联配电网作为一种新形态的供电结构,不仅可以形成闭环供电的新模态,而且提供了配电网层面的源荷协同技术平台。本文以柔性互联配电网的核心装备——柔性多状态开关(Flexible Multi-State S
强化学习算法是用于解决序贯决策问题的一类算法,与深度学习算法的结合推动了强化学习算法的发展。智能体通过与环境交互,增加对环境的认知,然后根据这些认知执行动作。“探索”是智能体在与环境交互过程中放弃当前最优行动,并通过执行其他行动增加对环境的认知以求获得长远利益的行为方式。提高所得策略的探索性能是强化学习算法面临的一个很大的挑战,而高效探索对智能体学到最佳策略起着关键性的作用。常用的提高探索性能的算
超分子传感器是基于分子或离子间通过一系列弱相互作用结合形成主客体化合物而构建的,因此作为主体的一系列大环化合物的发展备受关注。具有功能性空腔的有机大环常被用于超分子传感器研究,从最初的冠醚、到环糊精、杯芳烃、瓜环以及柱芳烃,主体大环化合物的发展十分迅速,并且在超分子传感器研究上起到重要的作用。这些大环分子可以作为电化学和光学传感器的受体,使其具有更宽的检测范围、更低的检出限和更好的抗干扰能力。近几
航空技术和传感器技术的发展为遥感图像的利用提供了有利条件,而遥感图像的语义分割技术是一个热门的研究方向,在自然资源监测、农作物提取、智慧城市建设以及道路提取等方面有重要意义。近年来,随着人工智能的迅速发展,使得AI遥感成为一个热门领域。本文使用深度学习方法对遥感图像的语义分割技术展开研究,设计出若干语义分割算法并在相关数据集上进行验证,得到了很好的分割效果,主要工作如下:一、基于全卷积神经网络,构
熔丝制造(Fused Filament Fabrication,FFF)是目前应用最广泛的3D打印方法之一,但受到打印装备自由度和工艺规划方法的限制,传统的FFF平台仅能在一组平行平面上沉积材料,层内和层间机械性能差异明显,且容易产生阶梯效应,这些问题成为限制FFF进一步推广的瓶颈。为解决上述问题,本文基于工业中广泛应用的机械臂构建了一个多自由度FFF系统,通过多自由度的曲面打印提高打印物体的表面
近年来,环境问题和能源问题随着社会的快速发展愈渐突出,使得新能源的充分利用成为必然选择。包含分布式电源、储能以及负荷等单元的微电网具有高效利用新能源的优势,因此,在目前的研究中具有较高的关注度。但风、光等新能源的出力具有较大的不确定性,且二者出力具有难以精确预测的特点,使得如何解决微电网中的不确定问题及预测误差问题成为当前优化调度方向的重要研究内容。同时,在当前对需求响应的研究中,研究对象主要为负
人类日常生活所消耗的能源主要来自于石油、煤炭等化石燃料,全球的经济、人文、科技等各个方面正在高速发展,化石燃料也因此被大量消耗,带来一系列能源紧缺和环境污染等问题。因此,人类社会致力于开发可再生能源,研究新型高效的储能器件。目前锂离子电池性能已经得到了完全开发,其实际能量密度已接近极限,无法满足更高的要求。研究人员关注到了具有超高理论能量密度的锂氧气电池。目前锂氧气电池的相关基础研究已取得巨大进展
自量子理论诞生以来,量子体系便成为许多科研工作者的研究热点,对量子体系的深入研究极大的促进了量子理论和凝聚态物理的发展。此外,诸如Kagome晶格、Lieb晶格和钙钛矿晶格、蜂窝结构晶格和T3晶格等各种晶格被成功制备,无疑是量子理论体系的又一次重大进步。另一方面,各种统一相对论和量子理论的候选理论,如弦理论、圈量子引力理论等都暗示了最小长度的存在,这意味着我们必须将通常的海森堡测不准原理修正为广义
经济绿色发展离不开绿色金融的支持,但受制度体系、改革基础、地方统筹等因素的制约,目前我国县域绿色金融发展仍处于初级阶段。文章在三明市获批创建省级绿色金融改革创新试验区的背景下,以三明市辖内明溪县为例,通过对县域绿色金融发展面临的瓶颈因素的分析,提出完善绿色金融政策体系、构建绿色金融市场体系、制定绿色金融标准体系、健全绿色信贷体制机制、增强地方统筹力量的对策建议。