复值神经网络的共轭梯度学习算法研究

来源 :大连海事大学 | 被引量 : 1次 | 上传用户:zsmslife
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
复值神经网络是人工神经网络的重要分支,在工程、生物医学以及物理学等领域已有广泛应用。按照激活函数的不同,可将复值神经网络划分为分离复值神经网络和全复神经网络。分离复值神经网络中使用有界但不解析的分离复值激活函数,可克服全复神经网络的奇点问题,但不能有效捕捉信道间的耦合信息,因此本文研究更具优势的全复神经网络。复梯度学习算法是复值神经网络的一种重要学习算法,但是该算法仍有许多不足,无法避免慢收敛和极易陷入局部极小值等问题。为了进一步提高复梯度学习算法的性能,本文面向全复神经网络提出了一种带有Barzilai-Borwein步长的复值Fletcher-Reeves共轭梯度算法和两种复值谱共轭梯度算法。基于Wirtinger梯度算子下建立了所提算法的全局收敛性理论。论文主要按照以下三个方面展开:(1)采用复Barzilai-Borwein步长和复值Fletcher-Reeves共轭系数对复值Fletcher-Reeves共轭梯度算法进行构造。结合复值Wolfe线搜索技术和共轭梯度算法的收敛准则,我们从理论上证明了带有Barzilai-Borwein步长的复值FR共轭梯度算法的全局收敛性。(2)为了进一步提高性能,我们考虑搜索方向中参系数间的交互性,提出了两种复值谱共轭梯度学习算法,并基于温和的条件对其中一种所提算法进行收敛性分析。(3)通过数值模拟实验对三种复值共轭梯度算法的性能进行估计。数值实验对比结果验证了所提复值算法的性能优势,也间接反映了三种复值算法间的收敛性差异。
其他文献
目的探讨非开胸食管内翻拔脱术治疗食管上段癌的手术方法、适应证、术后并发症的发生及防治。方法非开胸食管内翻拔脱术治疗上段食管癌35例,行胃食管颈部端侧吻合。结果全组
鄂尔多斯盆地北部上古生界致密砂岩储层具有:1)低孔、低渗、小孔隙、细喉道和渗透率对压力敏感;2)束缚水饱和度高、气水关系复杂;3)储集空间以溶孔和微孔为主、裂缝相对发育的特点
我国的村委会选举制度在不断推进农村村民自治和促进基层民主的发展路线上有着极其重要的作用。不但能够推进农村地区民主政治建设,同时还是保障农村基层建设和社会政治发展的根本制度。因此,推进农村选举制度的合理执行与有效实施,是极其重要的。随着多年的探索,农村选举制度与中国农村民主政治建设获得了长足的进步,而且目前的村民委员会制度也获得了肯定和拥戴。然而,地区性的政治建设依然受到多种因素的影响,农村地区特殊
鉴于校园网内AKP病毒的扩散已危害到学校的教学工作,介绍分析了ARP协议、ARP欺骗的过程、提出了高校校园网内ARP病毒防治的方法。
产业扶贫作为开发式扶贫的核心动力,是具有劳动能力的贫困户最有效、最根本的脱贫措施。产业扶贫作为开发式扶贫的核心动力,是具有劳动能力的贫困户最有效、最根本的脱贫措施
绘画的生命力体现在绘画个性的展现及绘画语言的创新,20世纪末东西方艺术文化的不断冲撞与融合,使传统的中国画在这种“矛盾”下创新发展。传统工笔画的发展不但表现在题材多样化,画风多样化,所用绘画工具的优化及科技的发展使得画家们对绘画表现手法更是有了深入的探究,各门类画种的绘画特技在中国画固有的规律下相互交融、吸收,画家们也根据自己所掌握的科学知识和生活经验,诠释和探索肌理现象和技法。如今丰富多样的画材
南阳理工学院在金工实习教学中,积极研究学生的心理变化规律,摸索出了一整套行之有效的教学管理手段,并在实践当中不断总结提高,在低投入、高生师比的不利情况下,却取得了良
法益保护前置化是刑法发展的趋势,为分析这一趋势,必须对法益保护前置化的原因、边界和实现途径进行剖析。在风险社会的时代背景下,传统的罪责刑法理论在应对风险时显示出自