数据中心内部负载均衡与基于深度学习的网络流量预测研究

来源 :浙江大学 | 被引量 : 0次 | 上传用户:sunchine0415
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
数据中心网络作为数据传输、计算和存储的中心,集中了各种软硬件资源和关键业务系统,诸如Web服务、搜索引擎、网上购物、网络游戏和MapReduce服务等。近年来,数据中心在云计算和虚拟化技术等新兴应用的发展带动下,在组成、结构、功能、规模及应用模式等方面都发生了深刻的变革。数据中心网络的特性与传统广域网差异巨大,部署在数据中心中的应用需求以及数据流量的特性千差万别,这些对数据中心的可用性可靠性提出了新的需求。为提高数据中心网络性能,本文从网络流量负载均衡策略和对网络流量的准确预测两个课题进行了探索性的研究。一方面,对于数据中心内不可预测的流量,基于路由的负载均衡策略可以降低网络时延,提高网络吞吐量。另一方面,数据中心内可预测流量进行准确的预测后,可根据流量预测值来进行网络流量全局优化调度,从而提升网络性能。课题一中,基于Fat-tree网络拓扑在数据中心中的广泛应用,本文对适用于Fat-tree 网络的负载均衡算法进行了研究,进而提出 了一种叫做全局轮询(Global Round Robin,GRR)的路由算法以及该算法的改进版本(ImprovedGlobalRoundRobin,IGRR)。该算法通过在顶层交换机和服务器之间的周期性连接配置,在上行路由中将数据包完全均匀地发送至所有可行路径上,并在下行路由中采用自路由的策略。理论分析和仿真验证发现该算法在不同的数据源模型下都实现了较好的负载均衡性能。于此同时,该算法中交换机内部固定周期性的连接配置也简化交换机结构的复杂性,降低了对交换机内部的硬件要求。课题二对如何进行准确的流量预测展开了研究。期望根据准确的流量预测,提前对可预测的流量制定相应的路由策略,以此提高网络吞吐量。本文将流量预测进行模型抽象为时间序列预测。相比于传统数理统计中的预测方法,本文中采用了基于深度学习的网络流量预测。通过设计一个能较好拟合流量特征的递归神经网络(RecurrentNeural Network,RNN),以此来根据流量历史数据来预测未来一段时间内的流量大小。根据流量特征,该课题中设计了一个5层,且每层100个基本单元的递归神经网络模型,并分别用一个一维特征的数据集和一个三维特征的数据集对模型进行训练。结果表明RNN网络模型相比于其他数理统计方法有更小的均方误差(Mean Square Error,MSE),而使用三维特征数据训练得到的RNN模型的性能比使用一维特征数据训练得到的RNN模型更好。
其他文献
建筑行业作为我国国民经济中重要的组成部分,随着改革开放的深入,得到了全方位的发展,推动着我国建筑企业、建筑市场以及国家经济的飞速发展。在建设工程施工建设中,对其进行
以腰果酚和环氧氯丙烷为主要原料,在催化剂苄基三乙基氯化铵的催化下合成了腰果酚缩水甘油醚。考察了反应条件对环氧值的影响,通过正交试验和单因素试验确定了合成腰果酚缩水
"互联网+"时代给管理会计的趋势和变化带来新的机会。美国政府将"互联网+"时代下的大数据比喻成"未来的新石油",它的特点是"4V",即Volume(大量)、Variety(多样)、Velocity(快
广西政策性森林保险业务经过四年多探索和发展后逐渐步入正轨,虽然取得了一定成绩但也存在不少问题,探讨开展政策性森林保险的必要性和可行性是促进其可持续发展的需要。发展
随着深度学习领域的快速发展,人脸识别和表情识别的研究和应用在这个大数据时代受到越来越多的重视。在安防监控、人机交互等方面,相关的应用也越来越多。目前常见的人脸识别
按照《信息公开条例》及《医疗卫生服务单位信息公开管理办法(试行)》的规定,医疗卫生机构逐步开展该单位的信息公开工作。各医院的做法尚不规范、成熟,实践中逐步出现因信息
医院是事业单位中为数不多的采用权责发生制为会计基础的核算单位,其财务工作除具日常业务核算与审计监督两项基本职能外,还附有预测、参与经营决策等拓展性职能。因此,其实
随着餐饮业的快速发展,油烟的污染日益严重。分析目前油烟污染的净化处理现状,论述了新型高效的油烟净化分离技术机理,从而开发研制出经济实用的油烟净化设备,为我国控制油烟
近几年,随着语料库语言学的发展,越来越多的学者将语料库语言学融入文学作品进行研究。但多数学者都是对文本的主题词,词簇进行量化分析,为文学的鉴赏提供更加客观的数据支持