多层前向神经网络分类器的泛化问题研究

来源 :南开大学 | 被引量 : 0次 | 上传用户:liugang168
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
唯有认知世界才能改造世界,提升机器认知能力的模式识别研究是人工智能领域的基础核心理论研究工作。另一方面,人工神经网络(简称ANN)本身具有很多优点以及一些其它人工智能技术所不具备的特点,但由于缺乏正确的理论指导,近年来ANN的发展并不乐观,应用研究中碰到的泛化问题至今仍没有完善的解决方案。鉴于模式识别在人工智能领域的重要地位以及ANN的研究现状,本文以模式识别为背景,以多层前向神经网络分类器为具体研究对象,研究了ANN领域的热点问题—泛化问题。 本文的研究主旨在于:期望通过本文这一探索性研究工作,使一些仅重视应用研究的ANN研究者充分认识到理论研究的重要性和必要性,以及应用研究与理论研究的不可分性,促进ANN更加蓬勃的发展。 本文主要的创新点和贡献有: 1)通过分析以往研究工作,发现了ANN分类器依概率渐进最优性证明过程中存在的问题,从而指出以往的理论结果存在着偏差。 2)在分析以往研究工作不足的基础上,建立了学习样本滤波(LearningSetFiltering)理论模型,导出了比较一般性的分类器设计原则,并以演绎方法和仿真实验分别证明和验证了以这一原则所设计的分类器解决了ANN的依概率渐进最优性问题。 3)在上述理论结果的指导下,着手解决ANN分类器在实践中所遇到的过拟和与权重初始化这两个重要的泛化问题。本文所提出的解决方案在人工数据集和真实数据集的实验中均取得了优于以往研究工作的结果,从而验证了这一方案的有效性。
其他文献
目前对无人机任务分配的研究日益广泛,在算法理论研究上不断改进算法的同时,对无人机任务分配算法的验证和仿真却没有一个统一的平台。因此造成不同的任务分配算法需要在不同
本论文在充分考虑华茂纺织股份有限公司未来发展需求的基础上,运用管理信息系统开发的一般理论和软件开发的基本方法,介绍基于客户机/服务器结构的华茂管理信息系统的整体设计
在非结构环境中机器人作业操作主要是采用基于传感反馈的力控制和柔顺控制方式,而目前机器人作业时不能获取足够的力传感信息是制约机器人力控制和柔顺控制水平提高的瓶颈之一
自适应逆控制是利用自适应信号处理的方法解决控制上的问题,在获得满意的系统响应和抑制扰动的问题上是一种很新颖的途径。然而,在控制非线性对象时,自适应逆控制需要建立对象模
随着现代电力系统的发展,电力系统的暂态过程越来越引起重视。电压相量是电力系统的一个重要参数,其中发电机的功角状况更是电力系统运行的主要变量,是监视整个电网及其电气
HFC(Hybrid Fiber-Coax)网络管理技术是一项针对光纤同轴混合网的管理技术。在数字电视技术发展的今天,对HFC网络运行的可靠性和可维护性要求大大提高,使HFC网络管理技术显得更加
城市交通枢纽作为锚固城市交通网络体系的基础以及各种交通方式衔接的纽带,对于城市交通具有重要的影响。尤其是在当前城市交通压力日益增大的背景下,城市交通枢纽发展规划研究
钻进过程实时状态监测与故障诊断是在非线性动态特征分析的基础上对钻进过程进行辨识和控制的。由于动态系统的随机干扰比较大,钻进过程的规律很难用数学模型来描述,单一的特征
在工业生产过程中温度是重要的控制参数之一,对温度的有效控制对于保证生产质量具有重大的现实意义和理论价值。 本文第一章介绍了温度控制的国内外发展概况,本课题的研究对
本文设计了一种基于嵌入式含油污水在线处理的控制部分。首先介绍了课题的来源和意义、课题的研究的目标及内容、国内外的污水处理发展及现状和我国污水处理的不足。 在第