【摘 要】
:
针对高速公路场景中无人驾驶车的换道决策问题,提出一种基于竞争结构的双深度Q网络(DDQN)的无人车换道决策模型.在深度Q网络的基础上,将无人车动作的选择和评估分别用不同的神经网络来实现,并将Q网络分为仅与状态S相关的价值函数和同时与状态S和动作A相关的优势函数两部分,使得Dueling DDQN模型可以更好地理解外部的状态环境.使用训练模型在不同复杂程度的道路环境中进行测试,同时与DQN和DDQN
【机 构】
:
北京联合大学北京市信息服务工程重点实验室
【基金项目】
:
国家自然科学基金资助项目(61871039,61871038); 北京联合大学人才强校优选计划项目(BPHR2020BZ01);北京联合大学研究生资助项目;
论文部分内容阅读
针对高速公路场景中无人驾驶车的换道决策问题,提出一种基于竞争结构的双深度Q网络(DDQN)的无人车换道决策模型.在深度Q网络的基础上,将无人车动作的选择和评估分别用不同的神经网络来实现,并将Q网络分为仅与状态S相关的价值函数和同时与状态S和动作A相关的优势函数两部分,使得Dueling DDQN模型可以更好地理解外部的状态环境.使用训练模型在不同复杂程度的道路环境中进行测试,同时与DQN和DDQN进行了实验对比.结果表明,该算法提高了无人车换道决策的成功率,并在保证车辆安全的前提下提高了无人车的行驶效率,在复杂的道路场景下的适用性更强.
其他文献
目的 探讨以精细化理念为基础实施护理干预对喉部手术患者康复效果的影响。方法 选取本院收治的82例喉部手术患者,采用红蓝双色球法将其分为两组各41例,对照组实施常规护理,观察组在此基础上以精细化理念为基础实施护理干预,比较两组患者的术后康复情况、护理前后的疼痛、生活质量和并发症发生率。结果 观察组进食时间(2.68±1.05)d、切口愈合时间(7.54±1.49)d、住院时间(9.46±3.12)d
现代农业产业园的筹划与建设成为新时期"三农"工作的重要内容,对乡村振兴和农业现代化发展具有推动作用。本研究通过分析石家庄市鹿泉区现代农业产业园区的背景和发展现状,对产业园区存在的问题提出对策。
随着我国经济与社会的发展和进步,能源需求不断增多,特别是建筑行业对能源的消耗增大,造成资源浪费的同时也污染了环境。因此,为实现绿色可持续发展,建筑企业应积极将生态策略融入建筑行业中,提升建筑行业的资源利用率。本文就建筑设计中融入生态策略的课题进行研究,并分析其存在的问题,希望能为相关从业者提供一定的参考与帮助。
学前融合教育本土化即将国际上先进的融合教育思想与中国特有的社会文化及教育实际相结合,形成具有中国特色的学前融合教育理论与实践体系。文章以河南省"学前融合教育试点园建设项目"为基础,积极探索学前融合教育本土化发展新路子、新方法,以期为广大中西部地区开展学前融合教育本土化实践提供有效经验。
为克服国际金融危机对我国经济的后续不利影响,确保我国经济的持续健康发展,国家将继续实施适度宽松的货币政策,强化金融部门加大对实体经济的信贷支持,特别是强化金融对"三农"的信贷支持力度。那么,在后金融危机时代,
为了提升能源利用率,促进可持续发展,为解决全球性环境问题做出贡献,航运业应重视船舶的节能减排问题。本文围绕船舶主机降功率节能减排的技术要点与优化措施进行分析探讨,为从业者提供参考。
距圣巴西勒教堂、红场与克里姆林宫仅几步之遥,扎里亚季耶公园所处位置历史悠久,在这里可以饱览俄罗斯的所有历史和其不断发展的愿景。此处占地35英亩,无数次见证着历史的沧桑变迁。19世纪,这里曾是犹太人飞地。后来,一座斯大林主义摩天大楼在此处破土动工,尽管最终未曾建成。欧洲最大的酒店——罗西娅酒店——也一直屹立于此,直到2007年才被拆除。之后五年里,由于设计师诺曼·福斯特一直在负责筹划将其扩建为
近年来人们节能环保意识的不断提升,对于环境问题的关注度也越来越高,我国也提出了可持续发展战略,希望社会各界在发展过程中都能够加大环境保护的关注度,切实提高各种资源的利用率,尽量减少对生态环境产生的破坏,促使我国真正走向可持续发展的道路。基于此,在本文中首先简单介绍了节能减排和环境保护的意义,结合目前环境保护现状,探讨了几点有效的解决对策,希望能够促进我国未来经济水平的稳步增长,真正实现人与自然的和
能源是人类生存﹑社会进步和经济发展不可缺少的物质基础。能源问题一直是经济发展中的焦点与热点问题,正确认识与处理能源在消耗过程中存在的问题﹐对于我国今后经济和社会的长远健康发展均具有十分重要的意义。目前来看,我国能源应用过程中还存在很多问题,如能源总量比较大,但人均消费的能源却少之又少,甚至还存在高能耗的情况,对于企业及国家发展均有不利影响。在新的时代背景下,我们要转变以往的发展理念,探讨能源现状,
自20世纪五、六十年代,A. P. Calderon和A. Zygmund建立奇异积分理论以来,以Calderon-Zygmund奇异积分算子为核心的各类算子(如振荡乘子算子,多线性积分算子等)成为近代调和分析理论研究中最为活跃的课题之一,由此形成并发展起来的许多方法和技巧已被广泛应用于算子有界性的研究当中。它们在复分析、位势论、算子理论、非线性分析等众多数学分支中都有广泛应用,相关文章参看[2、