基于深度强化学习的中央空调优化控制

来源 :苏州科技大学 | 被引量 : 0次 | 上传用户:xyfan
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,国家在大力推动城市化进程,城市内高楼大厦鳞次栉比,但建筑物的能耗浪费一直是个严峻问题。由于中央空调系统能耗是建筑物能耗内部所占比例最高的一项,关于相关的控制策略早已确立,但下一时刻的中央空调能耗往往是未知的,使得控制策略无法及时调整以达到最优状态,进而无法更好的实现节能的目的。因此,本文利用深度强化学习预测下一时刻中央空调的能耗,通过最优控制策略,来实现空调系统的节能。在中央空调优化控制问题中,本文在深度强化学习基础上,从如下三个方面进行展开研究:(1)针对经典DQN(Deep Q-Network)算法在训练初期收敛速度慢的问题,本章提出一种新的基于函数逼近协同更新的DQN算法。该算法在经典的DQN算法基础上融合了线性函数方法,在训练的初期利用线性函数逼近器来代替神经网络中的行为值函数网络,并提出一种离策略值函数更新规则,与DQN协同更新值函数参数,加快神经网络的参数优化,进而提高算法的收敛速度。将改进后的算法与DQN算法用于Cart Pole和Mountain Car问题,实验结果表明,改进后的算法缩短了收敛时间,具有更好的收敛性。(2)通过分析中央空调系统的能耗影响因素、实际数据收集等带来的问题出发,确立中央空调系统能耗预测的相关参数。由于数据收集过程中可能会出现断电、死机等原因带来的数据缺失、异常等情况,因此需要对实际数据进行预处理,避免由此带来预测不准确。利用强化学习对中央空调能耗预测问题进行建模,同时采用第一部分提出的DQN-LF算法进行能耗预测。最后基于某学院记载的中央空调能耗数据进行实验。实验结果表明,基于深度强化学习的中央空调系统的能耗预测方法预测精度较高,可以为中央空调系统优化策略提供指导。(3)针对中央空调系统的冷却水系统能耗占比中央空调的主要部分,提出一种基于深度强化学习中央空调优化控制。首先对中央空调系统进行分析,并确立优化控制的主要参数,即冷却水系统的流量和冷却塔风量的比例,根据其工作状态确立设备运行的约束条件,建立优化控制的目标。利用深度强化学习求解下一时刻最优控制策略时,由于下一时刻能耗未知,引入第四章DQN-LF中央空调能耗预测来弥补下一时刻能耗。通过深度强化学习求解到最优控制策略,及时的调整中央空调控制策略,实现中央空调的能耗节约。
其他文献
“元宇宙”一词频繁出现在大众视野,在不久前揭晓的“汉语盘点2021”中,“元宇宙”更是成为最热“国际词”。元宇宙到底是什么清华大学新媒体研究中心发布的元宇宙发展研究报告显示,元宇宙是整合多种新技术而产生的新型虚实相融的互联网应用和社会形态,它基于扩展现实技术提供沉浸式体验,基于数字孪生技术生成现实世界的镜像,
期刊
从烟草根际土壤中成功筛选出10株解钾细菌,并选择其中四种透明圈明显且生长量较大的菌种进行了解钾活性测定,其中解钾细菌GJ07的发酵液中K+离子质量浓度高出空白对照组54.5%.对GJ07进行16S rDNA的鉴定,确定其为巨大芽孢杆菌.采用批量发酵培养,通过改变碳源、氮源、碳氮比、温度、pH值、装液量等研究了解钾细菌GJ07生长的优化控制条件.结果表明蔗糖和蛋白胨为GJ07生长的最佳碳源和氮源(碳
随着我国经济社会的发展,人们对学生的综合素质水平变得越来越高了。对于新课标下的初中语文作文教学而言,教师通过应用相关的语文作文教学策略不仅能够提高学生的语文写作能力水平,而且还能帮助学生养成写作的好习惯,这对于培养和提高学生的语文综合素质水平而言有着非常重要的作用。但是据笔者了解,目前仍有一部分初中语文教师并没有采用有效的教学策略对学生进行写作教学,甚至有一些初中语文教师直接要求学生套用相关的写作
现代教育体系的改革要求教育活动不仅要对学生的基础知识进行传授与培养,更要求在课堂中培养学生的核心素养与综合素质。数学学科作为逻辑性较强、思维性较强的计算性学科,对于培养学生的逻辑思维、数学思维有着极为重要的作用,而数与代数作为数学课堂的重要构成,主要研究的是数量关系,并揭示其蕴含的变化规律,不仅可以培养学生的数学技巧、巩固学生的数学知识,还可以培养学生的数学素养。本文以核心素养观念教学理念下的数与
黑磷二维材料具有诸多优越的性能。包括高室温载流子迁移率、可广泛调谐的直接带隙、面内各向异和出色的非线性光学响应等。因而在光电器件中拥有广阔的应用前景。相比与金属和石墨烯,其拥有更宽的调制范围与调制手段。近年来,基于磷烯的等离激元诱导透明现象逐渐引起人们注意,其在慢光、光开关器件中很有潜力。本文使用软件FDTD solutions,通过时域有限差分法数值模拟计算基于磷烯π型结构下的等离激元诱导透明现
结合新课程改革背景,本文对新课标下人教版初中语文作文教学现状展开了分析,然后从审题、立意、选材、构思四个方面对语文课堂写作教学方法进行了探讨,为关注这一话题的人们提供参考。
语文写作可以有效帮助学生提高语文综合素养,提高表达能力,对学生一生发展有着重要作用。新课标要求下,初中语文教学目的要求教师更加重视对学生综合能力的提升,同时更加个性化发展,注重学生作为个体表达能力。在传统的教学手段教学下,存在着教学模式、教学方法不能与时俱进等一系列问题,严重影响了学生的课堂效率和写作能力的培养。教师应积极从创新教学手段、开发新型教学方法等方面丰富学生的写作手法,提升教学效率。
小学是学生学习数学的最佳时期,所以要全面提升学生的学习效率,规划好小学数学的学习方向,才能深入开展数学知识的学习,从而为数学的探索提供基础条件。随着科学技术的快速发展,微课改变了教育的形态和方法,作为教师要不断实践和创新,对小学数学教学进行全面探索,通过不断的总结和反思,对不足的问题进行有效的改进和完善,才能展现出教师的工作职责。
期刊
目的:探讨度拉糖肽致不良反应的发生规律和特点,为临床合理用药提供依据。方法:检索截至2021年12月31日国内外数据库关于度拉糖肽致不良反应个案报道文献,进行整理分析。结果:共收集10例不良反应,男性、女性各5例,年龄50~84岁;不良反应多发生于用药后1个月内;10例均为严重药物不良反应,涉及皮肤系统如坏疽性脓皮病、麻疹样药疹、大疱性类天疱疮,消化系统如药物性肝损伤、胆囊炎,血液系统如静脉血栓形
随着私家车持有量的迅速增长,城市中心区、商业区的乱停车、乱占车位等行为日趋增多,部分城市的停车配建标准已无法满足用户需求,人们在停车的过程中,缺少一个获取停车资源的信息管理平台,为用户提供便捷的停车导航。因此,以物联网、移动应用、人工智能等计算机、互联网方面的关键技术为基础,将城市内的停车场信息有效地整合,来实现对车位信息的实时查询及有效导航,避免车辆的无序流动,提高停车场资源利用率,已经成为了当