基于误差矢量化的选择性神经网络集成方法的研究与应用

来源 :北京化工大学 | 被引量 : 0次 | 上传用户:alienroom
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
神经网络集成算法是一种非常有效的建模方法,算法通过训练大量的子网络并简单结合其结论,能够很大程度上提高网络泛化结果的精度。增大子网间差异度是提高集成精度最有效的方法,而由于能够影响神经网络的因素很多,当前学术界对差异度的认识并不统一。传统方法独立训练各子网,子网间由于训练过程中不存在交互,训练出的子网差异度较小。本文将集成误差输出矢量化,从矢量的角度分析影响集成精度的因素,给出了基于误差矢量的差异度计算公式,并提出基于误差矢量化的子网选择方法。随后提出了基于误差矢量化的集成方法EVSNE(Error Vectorization based Selective Network Ensemble),该方法在子网训练同时考虑集成精度,通过训练过程中在优化目标值中加入惩罚项,使各子网输出误差矢量相互补偿抵消。EVSNE算法在训练过程中存在交互,子网差异度比传统的Bagging方法更大。通过分析EVSNE算法与传统的子集生成算法各自发挥作用的原理,得出两类方法可以结合,可以通过传统方法生成具有差异度的训练集,再通过EVSNE算法的交互过程来训练子网,从而提出基于Bagging的改进方法B-EVSNE和基于聚类的改进方法C-EVSNE。在改进的EVSNE算法中,Bagging和聚类方法可以看成对EVSNE的数据预处理过程。为了确定参数、验证算法,本文选取了6组标准数据对算法进行测试,6组数据均为神经网络常用的经典测试集。通过实验确定了EVSNE算法最合适的惩罚项参数取值与子网个数。随后将算法与传统的Bagging算法进行比较,证明了EVSNE算法具有比Bagging更高的泛化精度,而改进后的B-EVSNE与C-EVSNE比一般EVSNE泛化效果更好。HDPE(高密度聚乙烯)生产过程是石化工厂的大型项目,通过EVSNE及改进算法对HDPE过程建模,表明本文提出算法在实际工业过程建模中具有较高的精度与稳定性,具有较高实用价值。
其他文献
[摘 要] 自主学习与网络学习的结合,衍生出网络自主学习模式。提出大学生网络自主学习的八种能力,分析学生网络自主学习现状,探求培养策略。  [关键词] 网络;自主学习能力;问题;培养  [中图分类号] G642 [文献标志码] A [文章编号] 1008-2549(2016) 05-0067-03  以计算机技术和网络技术的应用为标志的信息时代,信息量、信息传播速度不断加快。为此,世界各国都在提倡
[摘 要] 工程人才,尤其是卓越工程人才的培养本身具有较高的难度。一方面增加大量的实践机会,另一方面在理论教学,尤其是工程类课程的理论教学过程中,采用各种现代教学手段对实践场景进行展示,将理论和实践更紧密地结合,将是突破卓越工程人才培养难关的关键所在。  [关键词] 现代;教学;工程;课程  [中图分类号] G642 [文献标志码] A [文章编号] 1008-2549(2016) 05-0070
当前,随着新闻传播技术的高速发展与变革,世界间的距离大大缩小,逐渐融为一体。作为世界间联系之纽带的新闻业也面临着严峻的考验。在当前形势下,新闻业应做好的工作是:包括
集中式无线通信网络由于需要事先架设必要的网络固定设施,而不能应对一些特殊的情况,无中心、快速自组织的无线多跳网络正好能弥补这一缺陷,受到越来越多的关注。   无线多跳
烧结是铅锌冶炼工艺的重要环节,是将不同成分的原料、燃料和溶剂等按一定比例混合配料形成烧结混合矿。烧结的基本要求是给料准确,即按照计算所确定的配比,连续稳定地给料,把
[摘 要] 根据“机械设备故障诊断”课程特点,提出一系列课程改革措施,包括整合教学内容,改进教学方法,改革考核方式。通过故障案例研究及讨论式教学、启发式教学和体验式教学方法,分阶段工程故障案例诊断考核等方式,将课堂知识与工程实际问题紧密结合,调动了学生学习的积极性,提高了学生运用所学知识分析、 解决实际问题的能力,增强了课程的教学效果。  [关键词] 机械设备故障诊断;教学内容;教学方法;考核方式
乒乓球机械臂作为乒乓球机器人的重要组成部分,是机器人研究领域中的一员,对于社会具有广泛的意义。论文的研究对象是乒乓球机械臂,研究的内容是其数学模型的建立以及定位与
This paper addresses the problem of sensor search scheduling in the complicated space environment faced by the low-earth orbit constellation.Several search sche
[摘 要] 变革创新高校思想政治理论课教学话语是话语自身发展变化的必然,是实现课程教学承载功能、调整教材话语不适的需要。教学话语具有真实性、规范性、现时性、可接受性和感染力,是思想政治理论课教学话语变革创新的基本要求。变革创新高校思想政治理论课教学话语的根本途径在于坚持政治话语、学术话语和大众话语的有机统一与融合。  [关键词] 思想政治理论课;教学话语;政治话语;学术话语;大众话语  [中图分类
请下载后查看,本文暂不支持在线获取查看简介。 Please download to view, this article does not support online access to view profile.
期刊