【摘 要】
：
交叉口是城市交通的核心和枢纽,要想有效地提升城市交通体系的通行效率,对交叉口信号配时的优化显得尤为必要.由于城市路网中大范围的信号配时方法决策属于模糊决策问题,而且路网中的车辆具有实时性,强化学习的方法可以适用于交通信号配时领域.本文把主流的Q-强化学习方法应用于干道交叉口信号配时,在每个路口以状态空间、信号周期、每个相位绿灯时间为参数建立模型,设置奖惩函数,并以车辆延误为指标,即Q函数,在相邻路口Agent的信息交换之后得出每个路口该时段的最优动作,降低了由于交叉口数量增多造成的各交叉口Agent间信息
【机 构】
：
华南理工大学土木与交通学院,广东广州510000
论文部分内容阅读
交叉口是城市交通的核心和枢纽,要想有效地提升城市交通体系的通行效率,对交叉口信号配时的优化显得尤为必要.由于城市路网中大范围的信号配时方法决策属于模糊决策问题,而且路网中的车辆具有实时性,强化学习的方法可以适用于交通信号配时领域.本文把主流的Q-强化学习方法应用于干道交叉口信号配时,在每个路口以状态空间、信号周期、每个相位绿灯时间为参数建立模型,设置奖惩函数,并以车辆延误为指标,即Q函数,在相邻路口Agent的信息交换之后得出每个路口该时段的最优动作,降低了由于交叉口数量增多造成的各交叉口Agent间信息交互的次数,避免了独立强化学习可能出现的维数灾难、无法长期学习等问题.实验结果表明:基于Q-强化学习的城市干道交叉口信号配时方法相比于固定配时和传统的Q-强化学习策略,能降低车辆延误,提升收敛速度,提高系统效率.
其他文献
柴油机各孔喷油规律对燃油在燃烧室的分布、雾化、可燃混合气形成、燃烧有重要影响,从而影响柴油机排放性、经济性、动力性.基于自行搭建的动量法各孔喷油规律测试系统,以某大功率柴油机喷油器为研究对象,探讨了不同喷油压力、喷油脉宽和喷孔直径对喷油器各孔喷油规律的影响.结果表明:随着喷油脉宽的增加,相同压力下喷孔喷油速率和流量系数发展趋势保持一致,喷油持续期增加.随着喷油压力的增加,喷油速率和流量系数随之增加,喷孔有效流通面积增大,空化效应更弱.但相比于喷油速率,流量系数变化较小.随着喷孔的直径增大时,喷油速率及其波
为了研究低负载故障超时计算的粒度,在现有的低负载故障检测方法的基础上,提出了自适应DSS故障检测方法.通过动态获取近期往返时间,利用指数加权移动平均算法对超时做加权运算,根据近期网络环境的动态变化自动设置故障检测超时,从而在确保系统检测的强完整性的同时,降低故障检测的误判率.实验表明,该方法分别降低了39％故障检测时间和26％故障误判率.
信息技术时代普通高校课程教学模式、课程建设等需要不断优化.以《焙烤工艺学》课程为例,基于该课程教学现状,探讨了大数据背景下《焙烤工艺学》课程教学模式变革,提出了基于“互联网+”的新型课程教学模式,即通过互联网平台把课堂教学、实验教学、期末考核三个环节有机结合起来,加强学生创新能力和动手能力的培养,实现在线教学与实体课堂教学的无缝对接,提高学生的综合能力.
为了探究临近加热壁面的双空穴对颗粒堆加热过程的影响,构建了含双空穴的颗粒堆传热模型,并利用搭建的颗粒堆传热性能实验系统对模型进行了验证,研究了双空穴与加热壁面距离和双空穴相对距离的变化对颗粒堆传热性能的影响规律.研究结果表明:随着双空穴与加热壁面距离增加,加热壁面的研究区域热流量先减少后增加,颗粒堆研究区域热阻先增加后减少,空穴影响区域范围和空穴影响区域面积比均先增加后减小,研究区域热流量最小值、颗粒堆研究区域热阻最大值、空穴影响区域范围和空穴影响区域面积比最大值均出现在空穴与加热壁面距离为1倍粒径时.随
目前伴随高校不断合并或扩建,逐渐形成了多校区图书馆,这也为管理工作带来更多新的困难和挑战.多校区图书馆管理模式仍然不够完善,面临较多需要调整的问题,尤其在智媒时代背景下,图书馆只有不断创新,才能在这个新的信息环境下生存、发展.因此,高校图书馆应通过一系列创新,完成管理模式的设计与规划.
针对准PR控制器对高次谐波抑制能力不足的问题,文中基于单相LCL型并网逆变器提出了一种准比例谐振(PR)控制策略;该策略在准PR控制器的基础上增加了高次谐波补偿器,准PR控制器用于实现对并网电流基频分量的无静差控制,高次谐波补偿器用于抑制特定次谐波分量;同时针对LCL的谐振尖峰,设计了基于电容电流反馈的有源阻尼.研究结果表明:所提方法可有效的将并网电流的THD从4.3％降低到2.8％,改善了并网电流的质量,验证了所提出的改进型准PR控制策略的可行性.
为了保证沥青路面层间具有良好的粘结力,提高路面的整体性和耐久性,对加铺型热再生热结合与传统加铺的层间结合性能差异进行实验分析.选用AC-13与SMA-10进行不同的层间组合,采用剪切及拉拔试验,分析不同的层间结合形式下的强度性能.试验结果表明:层间嵌入深度随着结合温度的升高逐渐增大;在剪切和拉拔性能方面,层间热结合要显著强于传统薄层加铺;持续的增加层间嵌入深度,这在一定程度上就会增加层间剪切强度;热结合温度为140℃及以上时,层间剪切强度不再随嵌入深度增加而增加,主要表现为混合料的强度.层间结合效果随实验
新中国成立70多年来,我国教师教育政策呈现由注重量的增加转向注重质的提升、由不均衡转向均衡发展、由借鉴国外经验到构建中国体系等特点,但也存在供需结构性失衡、政策制定过程不优化、法律体系不健全、评价监督体系不完备等问题,针对这些问题,我国应进一步优化调整教师教育供给结构,优化教师教育政策制定过程,健全教师教育法律体系,完善教师教育政策评价体系.
为加快推动安徽省低碳经济的发展,运用文献资料、数据分析等方法,结合安徽省产业低碳化发展现状,剖析安徽低碳经济发展的制约因素,提出建立健全与低碳发展相关的法规和制度、建立建全产业低碳化发展的投融资机制、建立碳交易机制和技术交易市场、推动绿色低碳可持续的城市化产业转型升级、优化产业低碳发展的统计监测和考核评价体系、加强低碳技术的创新与研发、重视复合型低碳人才的培养、提高科普和社会公众参与度等发展策略与建议,以期助力安徽低碳经济快速发展.
民俗是一个民族历史文化长期积累的养分,积淀着异常丰富的心理背景.文学作品中常常有着大量直接的民俗或者暗含着的民俗心态描写.这些描写不仅能够展现出不同地区的民俗样貌,而且在小说结构安排、人物形象刻画以及思想主题揭示上都有着重要的作用.沙汀作为四川乡土文学的代表人物,其作品中就有许多民俗描写,这些描写为沙汀小说增添了浓郁的巴蜀文化气息.本文从环境、方言以及人物刻画三个方面来展现民俗在沙汀小说中的特色及作用.