深度Spiking神经网络模型研究及应用

来源 :电子科技大学 | 被引量 : 2次 | 上传用户:wzmhua
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度学习和Spiking神经网络是人工智能相关领域的热门话题。深度学习已经在多个领域展现其强大的计算能力,其主流模型通过分层表示来抽象数据。Spiking神经网络作为第三代神经网络,其独特的神经元模型使其在类脑计算相关领域的影响力与日俱增。先前的研究表明,Spiking神经网络中可以用非监督学习算法,脉冲时间相关可塑性(Spike timing dependent plasticity,STDP)提取特征。然而,这些研究使用的网络都相对较浅,通常只有一层可以训练。另一种研究表明,深度学习使用基于速率的反向传播神经网络,通过增加网络层数提高识别的鲁棒性。因此,本文在对Spiking神经网络和深度学习进行了大量的理论和实践上的研究,本文在分析深度学习已有模型的基础上,融合Spiking神经网络特殊的神经元模型、突触学习规则和对外部输入信息的处理等机制,构建了一个基于STDP的脉冲深度神经网络(STDP-based spiking deep neural network,SDNN)并提出一种脉冲时间神经编码,主要包括以下内容:(1)研究并提出基于Spiking神经网络的动态区域生成算法,并作为SDNN的编码机制。该算法将图片预先分成小区域,利用不同区域的点火时间作为网络的编码值。相较于Spiking传统编码方式,算法与生物机制更紧密地结合,点火机制来自神经元传递信息的方式,网络形态多样性来自视觉皮层的多个感受野,为生成超像素区域提供了一个新的视角,为Spiking神经网络特征提取和分类创造了条件。(2)研究并提出基于STDP的脉冲深度神经网络(SDNN)。为了适应Spiking神经网络的要求,调整卷积神经网络(convolutional neural network,CNN)架构,采用STDP学习规则,使得神经元逐步学习输入图像的特征。通过在Caltech101数据集和MNIST数据集分别实验,验证了新模型的有效性。SDNN比传统的Spiking神经网络模型训练效率更高,分类效果更优,这表明编码方式和学习机制(STDP规则和竞争学习)有效的区分对象的表示,两者的结合是理解灵长类动物视觉系统学习方式、实现低能耗和提高处理能力的关键,对人造视觉系统也很有意义。
其他文献
文章从城市照明规划的定量内容,城市照明单项设计内容以及实施的技术要求,城市照明建设管理方面内容对城市照明建设进行了研究.
  为探讨晚第四纪有机碳埋藏情况变化与海冰覆盖和环流等变化之间的关系,分析了北冰洋阿尔法脊08B85-D 孔沉积物的Mn 和Ca 含量、粒度组成、有机碳含量和有机碳δ13C 组成
模数转换器(ADC)作为现代微电子通信系统中的关键设计模块,一直受到学术界和工业界的高度重视。近年来,随着5G移动通信的快速发展,对高速高精度ADC的要求也越来越高。尽管如此,由于我国高速高精度ADC领域的相关研究起步较晚,导致现阶段国内研发水平远低于国际先进水平,特别是最近受国际局势影响,更体现我国加快高性能核心芯片自主研发的迫切性。在众多ADC结构中流水线ADC由于其在速度、分辨率及功耗上的良
太赫兹大气传输是太赫兹科学技术及其应用的重要组成部分,它几乎渗透于所有的太赫兹应用技术领域.现有文献中所说的太赫兹大气传输基本都是水平路径的传输,而文章基于辐射传
可降解生物镁合金因其优异的力学相容性和生物相容性,广泛应用于人体硬组织修复材料领域。但因金属镁的化学电位较负,导致腐蚀速率过快,严重制约着生物镁合金的临床应用。据报道,镁合金非晶化可有效提高其耐腐蚀性能,但传统制备方法所制备出的非晶较小,无法满足实际应用。因此本文Mg60Zn35Ca5合金为研究对象,首先研究了激光重熔工艺对镁合金的微观结构影响规律,然后在此基础上进一步工艺参数优化制备出镁合金非晶
分析长带式输送机和可伸缩式带式输送机的特点,指出常规的液压张紧装置不能满足此类输送机的张紧要求。提出一种由液压绞车和张紧油缸联合动作的张紧装置,介绍系统工作原理、液
近日,据韩国媒体报道,韩国第七艘孙元一级(德国214型)AIP常规动力潜艇已经下水。$$该潜艇除了装备反舰导弹、鱼雷和水雷外,还装备了韩国自主研发的潜射远程巡航导弹。一时间,关于
报纸
当前的中学语文教育现状与'新课标'理念相去甚远,应试取向引发了教育目标功利化、课程内容窄化、学习方式僵化、师生情感淡化等一系列问题。中国有优秀的教育传统,书
随着机器人应用技术的发展,服务机器人走进人们的生活日渐成为可能.但机器人本身计算能力有限,同时仅靠自身的传感器接收的信息也有一定的局限性.现有的机器人还不足以胜任面
随着我国教学改革的逐步深化,作为一种新的研究范式,设计性研究为教学改革研究提供了新的方法论指导。通过对国际远程教育领域7本核心期刊2007-2016年58篇设计性研究文献的深