基于MapReduce的BP神经网络并行化研究

来源 :南昌大学 | 被引量 : 0次 | 上传用户:cbiba123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
BP神经网络作为目前应用较为广泛的人工神经网络之一,面对大规模数据集时,不免存在训练时间长、效率低等问题。为提高BP神经网络在大数据方面的应用,对BP神经网络进行并行化设计是十分必要的。基于MapReduce的BP神经网络并行化模型不仅能处理大规模数据,还可以提高模型的训练速度,但是原始模型中BP神经网络仍存在收敛速度慢、易陷入局部收敛等问题,并且Map阶段训练产生的局部收敛权值矩阵在Reduce阶段进行处理后,产生的全局收敛权值矩阵无法保证MapReduce训练朝着全局收敛的方向进行。针对上述问题,本文提出了两种不同的解决方案:一种是使用粒子群算法在Map阶段对BP神经网络的初始权值和阈值进行优化,以提高BP神经网络的训练速度,进而减少模型的训练时间;一种是使用遗传算法代替Reduce阶段取平均值的方法,将Map阶段收集的权值矩阵进行全局最优搜索,并在下一次训练中代入最优矩阵,这样既能减少迭代次数,也能使训练朝着全局收敛的方向进行。本文分别对两种改进后的模型与传统模型进行训练,通过实验的结果表明,两种方法均能减少训练时间,提高训练精度,并结合模型的加速比和可扩展性的分析,证明两个改进后的模型性能良好。
其他文献
文章在深入分析业绩评价与企业战略关系、平衡计分卡的基本原理及其在企业战略性业绩评价上的应用价值的基础上,详细地阐述了我公司基于平衡计分卡,构建企业战略性业绩评价体系
目的探讨低磁场MRI在膝关节骨挫伤的应用价值。方法分析60例膝关节骨挫伤患者的X线检查、CT扫描、MRI检查的影像资料和临床病史资料。结果 60例患者的X线平片和CT片均未发现
针对钛合金板材弯曲过程中的质量问题,尤其是回弹问题,提出了在弯曲过程中对凹模叠加一定方向、一定频率和振幅的超声振动辅助弯曲方法,选择受回弹影响较大的TC1钛合金板材进
自2008年IBM提出“智慧地球”这一概念以来,越来越多与“智慧”有关的新概念被一一提出,“智慧课堂”这种新型的课堂模式就是其中之一,而且,现在智慧课堂也是众多高校学者研
本文主要研究了基于Godunov格式的求解Burgers方程的有限差分多步法。文中首先详细地介绍了计算流体力学的发展历史及Burgers方程的研究意义,指出了模拟Burgers方程的困难之
朱湘和戴望舒二人在追求诗歌外在音乐美上找寻的路子是相同的.戴望舒在后期转而追求诗歌内在音乐美,这种前后诗艺观的变化正是戴望舒在朱湘探索基础上的发展.他们在诗歌探索
合资铁路组织结构是关系到合资铁路运营的关键因素之一。文章通过介绍新组织结构学派的五种组织结构形式和当前合资铁路存在的四种运营模式,分析了新组织结构学派理论在合资
近些年军队疗养院康复医学中信息化建设迅速发展,信息技术的应用使疗养院康复医疗的技术水平和设施得到了完善和提高。但医疗信息化在康复医疗服务中还存在着一定的局限性。随
经济的发展和城市化进程的加快,使城市人口的数量激增,市民结构也相应发生明显变化。这些新增市民为城市的各行各业注入了生机与活力,并逐渐成为城市的主人。他们在无形中改
第一部分脓毒症致急性肾损伤小鼠模型的构建及胰岛素样生长因子结合蛋白7和金属蛋白酶组织抑制蛋白-2的表达目的:构建小鼠脓毒症致急性肾损伤模型,并通过肾组织病理学评分、