基于考虑状态分布的深度确定性策略梯度算法的端到端自动驾驶策略

来源 :清华大学学报:自然科学版 | 被引量 : 0次 | 上传用户:lan2009908
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
端到端方法是实现自动驾驶的方法之一,而自动驾驶的场景较为丰富,不同场景的特征差别较大,这使得基于强化学习的端到端自动驾驶方法训练时的随机性衰减速度难以确定,若衰减过快,在面对新场景时无法获得较好的自动驾驶效果,反之则会使得算法难以快速收敛。针对这一问题,该文提出了一种基于输入状态分布筛选的随机策略和经验回放方法,将当前输入的状态数据和已保存的状态数据之间的距离进行对比,根据不同的距离选择不同的随机策略参数,同时在经验回放时提高出现频率较低场景的回放概率。仿真结果表明:该算法在训练后期面对与前期数据分布差异
其他文献
伴随着国内经济的持续发展,人民的生活水平日益提升,对居住环境也越来越重视,给园林施工单位迎来了极大的发展机遇和挑战。园林建设单位要加大对施工设计以及绿化养护技术的投入,持续发展生态建设内容,以实现更高层次的发展。文章针对景观园林的绿化施工设计以及养护技术提出了一些观点,促进园林行业在可持续发展道路上走得更远且更好。
摘 要:目的:添加支链氨基酸(branch chain amino acid,BCAA)的肠外营养支持对肝硬化肝癌大鼠肝部分切除术后营养状态、免疫功能以及肝脏再生的影响。方法:30只SD大鼠模型构建肝硬化肝癌,采用 Higgins 法进行肝中叶部分切除。随机分成观察组和对照组。对照组术后在基础饲料基础上给予8.5%复方氨基酸注射液(18AA-Ⅱ)(Novamin)的肠外营养;观察组采用常规饮食基础
文章以桃花源文化为核心吸引力,为游客提供高品质的旅游产品体系,结合全域旅游理念、“旅游 +”思想与“旅游 +”产业融合发展的有效模式,优化常德市旅游开发路径,助推常德市全域旅游发展。
随着城市化进程的不断加快,除了注重建筑的质量以外,还对城市的生态给予了很大的关注,生态环境问题一直是国家关注的重点,尤其是近些年来随着环境的日益恶化,国家又进一步加大了管控力度,而水利工程又是众多工程中非常重要的组成部分,不仅关乎着相关人员的生命安全,还关乎着社会经济的整体发展水平。
数字化技术的发展已经走过了二维数字化,并从单一的三维模型应用走向了集成式应用,正在迈向一个通用数据环境下的互联BIM时代,未来,技术的发展也必然会朝着数字孪生、大数据下的自动化和智慧化的方向不断前行。
随着城市化进程的加快 , 为市政工程的施工营造出极为有利的环境 , 在一定程度上扩大工程建设的规模。在进行实践的过程中为了更好地达到安全文明施工标准要求 , 将其管理研究内容进行细化。系统分析存在的问题 , 提出相应的措施进行科学解决 , 这样才能更好地保证市政工程施工的安全性 , 从而有效提升结构性安全功能 , 进一步将市政施工的工作思路进行拓宽 , 支持当前城市化建设事业的持续发展 , 防止在建设过程中埋下安全隐患。
胸怀千秋伟业,恰是百年风华。2021年正值伟大的中国共产党迎来百年华诞,百年披荆斩棘,百年奋力开拓,百年砥砺前行,中国共产党带领全国人民从苦难中站起来,从一个胜利走向又一个胜利,取得了令世界瞩目的成就。在波澜壮阔的时代画卷中,惟有奋斗能留下深深的印记。十一届三中全会强劲东风催发中国特色社会主义各项事业,1988年中国物品编码中心在改革开放的伟大历史进程中应运而生,力促我国编码事业尽快走上规范化、标准化、科学化道路,与世界接轨。随后,我国的编码事业乘改革开放之东风,快速发展壮大,历经保出口、促流通、信息化、
为探讨过敏性鼻炎(allergic rhinitis,AR)对机体Th9变化及相关细胞因子表达的影响,收集2018年1月至12月于南宁市第二人民医院就诊的AR患者46例为病例组,同期健康体检者12例为健康组,采集两组研究对象血清,检测IL-9、IL-4和TGF-β1表达水平。取C57BL/6小鼠6只,采用随机数字表法分为模型组和对照组(n=3),建立卵清蛋白(ovalbumin,OVA)致敏的AR小鼠模型,根据鼻部症状学评分判定模型构建是否成功。qPCR检测各组小鼠鼻黏膜组织中PU.1、IRF-4、IL-
7月1日,全省林草系统各单位分别集中收看了庆祝中国共产党成立100周年大会直播盛况,习近平总书记在大会上的重要讲话在甘肃林草系统干部职工中引发热烈反响。省林草局局长宋尚有与局机关干部职工一起收看了大会盛况。他表示,中国共产党根基在人民、血脉在人民、力量在人民。生态文明建设关乎陇原人民福祉,推进全省林草生态建设任务艰巨,需要全省林草人切实秉持\"江山就是人民.
城市河道是城市水环境的重要载体,对城市河道的治理是保障城市水环境质量的关键内容。文章简要分析了城市河道水环境生态治理的价值,参照水环境治理问题,从优选污染治理技术、合理设计水下森林、增设微孔爆气装置等方面予以论述,以此提高城市河道管理水平。