储备池计算中的储备池及其优化研究

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:habi_jia
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
冯·诺依曼结构计算机所存在的“内存墙”问题严重阻碍了计算机性能的进一步提升,为此,研究者提出液体状态机(liquid state machine,LSM)和回声状态网络(Echo state network,ESN)两种储备池计算,将内存与计算单元合并以避免“内存墙”问题。两种储备池计算各具优势。液体状态机具有更高的生物真实性,因而具有较高的抗噪性和鲁棒性,同时能耗也更低。而回声状态网络则具有更高的准确率和稳定性。二者面临共同的问题——储备池的优化较为困难,即采用人工神经网络的方法无法保证有效性,而采用高生物真实性的方法又过于复杂。为此,本文对两种储备池的优化方法进行了研究,提出具有较高生物真实性且并不复杂的储备池优化方法,主要研究内容包括:(1)研究了基于连接权值和结构的液体状态机储备池优化方法,提出一种非局部连接的液体状态机的储备池优化方法。为了提高储备池的泛用性和抗噪性,同时避免复杂的优化过程,本文模拟大脑中普遍存在的各神经元集群间的非局部连接分布——伽马分布来生成储备池的权值,生成一个具有更高生物真实性、隐含功能柱结构的储备池。首先,通过对储备池活动和储备池进行Lempel-Ziv复杂度分析,从理论上说明该种储备池优化方式的优势;然后通过与脉冲时序可塑性算法(STDP)和高斯分布等进行对比实验,验证网络的性能。(2)研究了基于小世界网络和功能柱的回声状态网储备池优化方法,提出一种区域划分的回声状态网储备池优化方法。为了提高储备池的记忆能力和信息传递能力,本文采用小世界网络对储备池结构进行了优化。改进了储备池原本随机连接的结构,使网络具有更优的计算信号处理能力,最后用有输入的随机序列预测任务检验优化的效果。为了提高储备池的稳定性,本文将功能柱结构显式的引入储备池中,将储备池划分为不同的功能区域。通过多个部分独立工作、共同完成任务的方式提高网络的稳定性,并通过信号生成实验进行验证。实验结果表明,采用伽马分布对储备池进行优化相对于常用的STDP优化,能在不降低准确率的前提下提高液体状态机的抗噪性和鲁棒性;采用小世界网络优化的储备池能够提升回声状态网络在有输入序列预测任务上的表现,与粒子群算法相比具有更高的预测精确度;在储备池中进行功能柱划分能够提高回声状态网络的稳定性,使网络在信号生成实验中取得较好的表现,与采用非线性读出函数相比受网络随机性和超参数的影响更小。
其他文献
智能制造是指将人工智能运用于制造行业,由智能系统在制造过程中进行推理、分析、判断、决策等活动,实现生产制造的智能化。注射成型是塑料加工制造的主要方法之一,由于注塑成型是一个复杂的生产过程,在各个注塑阶段受不同的参数调控和复杂的外界因素影响,注塑过程塑料制品往往会产生各种类型的注塑制品缺陷,直接影响制品质量。将机器视觉技术运用于注塑制品缺陷检测能够提高检测精度、提升效率,是实现注塑智能化的重要部分。
局部放电缺陷是引发电缆故障的重要诱因,及时发现电缆中的局部放电对保证电缆正常运行具有重要意义。光纤传感技术作为检测局部放电的非电测法之一,具有防腐蚀、抗电磁干扰能力强等显著优点,能够克服电测法现场应用存在的一些问题。针对10kV交联聚乙烯(XLPE)电缆的局部放电检测,本文对基于光纤光栅(Fiber Bragg Grating,FBG)和萨格纳克(Sagnac)干涉两种光纤传感技术进行了研究。由于
十八大以后,进入改革深水区的中国,社区存在着诸多问题,而社区治理仍处于探索阶段。改革开放实现商品经济以后我国出现了以营利为目的的物业公司,他们负责管理包括小区建筑修
微泵是一种微驱动器,多应用于微流控领域。热泡式微泵的工作原理是基于气泡爆破理论来实现液体的泵送。热泡式微泵多采用无阀结构,因此具有较高的可靠性,可用于实现粒子分选、传感检测、驱动混合等功能。针对压电微泵、静电微泵驱动电压高且制造工艺复杂,以及热泡式微泵产生的高温会损害溶液中的部分生物或化学物质等缺陷,本文基于感应加热技术、气泡核化理论及无阀微泵驱动原理,研究一种气泡定点生长微泵,该微泵上的微型加热
近年来,DNA计算的迅速发展,引起了研究者的广泛关注。相比于电子计算机,DNA计算拥有不可比拟的优势。通过生物系统工程和分子信息处理,DNA计算可以也实现作为数字计算机的计算活动。实际上,电子计算机中逻辑门作为基本的运算单元,构成了复杂的运算过程。本研究初步开发了多种基于DNAzyme的新型链置换模型分子逻辑门,用以进行基本的逻辑运算和一系列的分子电路。在这里,主要的操作是重复DNA酶消化和熵驱动
弗兰纳里·奥康纳一直被认为是美国继福克纳之后最杰出的南方作家之一。作为美国文坛上一位重要的作家,奥康纳的一生尽管短暂却为后世留下了宝贵的精神财富。她的作品通常带
近年来,随着我国国民经济和消费水平的持续提高,味道鲜美、风味独特、营养丰富的小龙虾制品越来越受到消费者的欢迎。目前小龙虾制品的主要营销方式为现做现卖,这种营销方式易受小龙虾养殖周期的影响,同时也无法满足现代消费者对小龙虾制品便捷性和耐贮藏性的需求。本研究以小龙虾为原料,首先利用现代食品加工技术,优化小龙虾的卤制工艺参数,开发出一种风味独特、营养丰富、便捷携带的卤制小龙虾;接着研究对比了卤制小龙虾的
伴随着互联网技术的发展,数据分析在各行各业中起到了举足轻重的作用。在数据分析过程中,如何获得一个完善、稳定的数据源已逐渐成为人们关注的焦点。真实数据源存在的数据冗
背景:抑郁症目前是一种在世界范围内较常见且自杀率很高的精神疾病,然而不幸的是,每年仅有不到百分之十的抑郁症患者曾接受过有效的治疗,这其中一个很重要的原因就是目前临床
随着建筑行业的发展,世界各国均在积极研发高强度高性能钢材。为满足我国建筑行业的需求并保持我国工程技术的竞争力,河南舞阳钢铁有限公司等研发并改进了国产高性能建筑钢材