一种高效的经验回放模块设计

来源 :计算机应用 | 被引量 : 0次 | 上传用户:yeyuan1985
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对深度Q网络(DQN)应用中基于python数据结构直接实现的经验回放过程时常成为性能瓶颈,提出一种具有高性能及通用性的经验回放模块设计方案。该设计方案具有两层软件结构:底层的功能内核由C++语言实现,以提供较高的执行效率;上层则由python语言编写,以面向对象的方式封装模块功能并提供调用接口,使模块具有较高易用性。针对经验回放所涉及的关键操作,一些技术细节被充分研究和精心设计,例如,将优先级回放机制作为附属组件与模块的主体运行逻辑分离,将样本的可抽取性验证提前到样本记录操作中进行,使用高效的样本淘汰
其他文献
2013年12月13日,新三板正式成为全国性的股权交易中心,与主板、中小板、创业板以及区域股权交易市场一起,构成了我国多层次的资本市场体系。截止2018年12月31日,已有10691家公司成功挂牌新三板。新三板的发展,对于帮助中小企业规范经营运作,提高融资效率,拓展企业知名度有着非常重要的意义。企业财务规范化程度,某种程度上反映出企业的管理水平和经营质量,是股转公司审核的重点。然而,我国中小企业数
地下水砷(As)异常是饮用水的主要威胁之一,由于广泛分布,已成为全球关注的热点问题。地下水砷异常在孟加拉国已成为严重的环境地质和危害公共健康问题之一。据报道,孟加拉国饮
通过对西方发达国家和我国的老城中心区城市更新演化过程的分析,比较了双方有关老城中心区的城市更新理论产生、发展的背景及实施效果,从而在进行老城中心区更新研究或规划时,能
目的对比不同Lauren分型胃癌的临床病理特征,对其进行生存分析,并筛选预后因子。方法回顾性分析2007年1月1日—2008年6月30日在哈尔滨医科大学附属肿瘤医院接受手术治疗的胃
随着互联网与教育的深度融合,传统的课堂教学模式正受到网络教学模式的严重挑战。混合教学是将传统教学与互联网教学优势相互结合的一种新型教学模式,是当前教育教学改革发展
对台湾地区"公民投票"问题的研究应从"公投前"问题延伸到"公投后"问题,从"公民投票法"本身拓宽到构成"公民投票"制度的台湾地区宪制性制度。台湾地区"公民投票法"规定了不同
【正】 近年来,随着西班牙对外经济关系的发展与拉丁美洲对外经济关系多样化,西拉之间的贸易与经济合作关系取得了很大进展。西班牙已成为许多拉美国家的重要贸易伙伴,而拉美
由明矾和胶料配制而成的胶矾水,是书画绘制、装裱和修复过程中经常使用的材料。胶矾水具有防腐、固色和增加机械力度等功能,但对纸质文物的耐久性有一定的影响。本研究选用宣
阿司匹林的功过山东省烟台师范学院(264025)孙树萍阿司匹林学名乙酰水杨酸,它是一种有着近一百年应用历史的常见药,且近年来使用的范围又在不断扩大.随着人们对药物综合性能要求的提高及
“罗尔网络募捐事件”曾在网络上闹得沸沸扬扬。据相关媒体披露,现梳理大概经过如下。2016年9月初,深圳前媒体人罗尔的女儿罗一笑查出白血病,住进深圳市一家医院。此后,罗尔