演化场景下云应用系统资源管理研究

来源 :上海工程技术大学 | 被引量 : 0次 | 上传用户:hnazlz
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着云计算的发展和兴起,其越来越受到用户的喜爱。作为云上的虚拟化产品,相对于传统服务器,云服务器具有高可靠性、按需付费、资源弹性获取和管理方式灵活等特点,因此越来越多的Web应用管理者都选择将Web应用部署在云上。对于Web应用的管理者而言,一方面需要保证服务质量(Quality of Service,QoS),另一方面需要尽可能降低云资源租赁费用,提高费效比。Web应用运维人员需要根据需求对云服务器进行相关计算资源的配置,其中带宽资源是云服务费用中一项主要支出项目,且是配置更新相对频繁的一项资源。当负载发生较大变化时,为保证QoS,Web应用运维人员需要及时进行带宽需求预测并制定带宽管理方案,同时需要对候选方案可能带来的结果进行预先评估,以保证选择的方案能够提供稳定可用的服务,因此对于带宽资源管理的研究十分必要。带宽管理候选方案可以看作是一种假设的系统演化,本文的研究内容即是对系统进行带宽驱动的假设分析(What-if Analysis)。在现有的云应用资源管理研究中,着重关注带宽资源的较少,大多数研究侧重于CPU和内存等资源。此外,大多数研究中的方法不能适用于演化场景的预测任务,需要调整数据集或重新训练模型。针对上述问题,本文首先提出一种基于网络仿真的假设分析方法,该方法可以用于带宽需求预测和带宽管理方案的评估。但该方法模型参数较多,调节过程复杂,故本文进一步提出一种基于机器学习的方法,该方法分成两部分,一部分为采用传统机器学习模型进行带宽需求和QoS预测,另一部分为采用迁移学习方法实现特征的迁移,以帮助传统机器学习模型解决演化场景下的QoS预测问题。本文提出的两种方法均可以帮助Web应用运维人员更好地进行带宽资源管理。本文的研究内容具体包括以下三个部分:1)一种基于网络仿真的Web应用带宽资源需求和QoS预测方法,该方法采用简化的并行负载模型,同时运用自动化日志挖掘方法提取模型所需参数,并使用网络仿真工具模拟复杂的网络传输过程,用来预测不同负载强度下的带宽需求和QoS变化。最后通过基于基准测试TPC-W的Web应用验证方法的有效性,并对几种带宽管理方案进行评估。2)由于基于网络仿真的方法对QoS预测结果的稳定性稍差,且模型参数较多,参数调节过程复杂,故本文提出一种基于机器学习的方法对网络吞吐量和QoS进行预测。该方法采用传统的机器学习模型,方法中详细介绍了数据挖掘过程,并引入带宽利用率作为一个特征,使模型摆脱固定带宽配置的约束。另外,该方法同时考虑了CPU资源的影响。最后同样选择基于TPC-W的云应用作为案例来评估该方法的有效性和稳定性,且尝试进行演化场景下的QoS预测任务。3)由于传统机器学习方法对于演化场景下的QoS预测任务难以取得好的结果,因此本文进一步提出了一种基于域自适应的方法用于特征迁移,帮助传统机器学习方法更好地预测带宽驱动的演化场景下Web应用的QoS。该方法根据用户体验对响应时间进行分级,将回归问题转化为分类问题。最后通过丰富的实验来评估该方法,包括在多种演化场景下对于基准测试系统TPC-W和一个真实Web应用的QoS预测。本文提出的方法可以用于评估云上Web应用的带宽管理方案,评估结果可以为Web应用运维人员提供决策参考,以帮助他们提供高质量的应用服务,同时节约成本。另外本文提出的方法也可以推广应用到其他计算资源的管理中。
其他文献
企业知识产权能力演进是一个从无到有、从低到高的过程,对知识产权能力演进问题的研究便于企业厘清知识产权能力所处层次,从而识别知识产权能力发展中的关键问题并有针对性地加以应对具有重要的意义。基于能力生命周期理论以及连续性创新与不连续性创新理论等将企业知识产权能力演进划分为孕育期、成长期、高原期、转轨期四个阶段,详细阐述了知识产权能力演进的自动力与它动力;通过行业生命周期和曲线拟合相结合的方式构建了知识
副车架是连接悬架与车身的重要连接件。为获得一套符合内高压成型加工技术的副车架正向设计思路,避免传统副车架设计中穷举设计方案后校核的繁复研发流程、缩短开发周期并在
绿色发展是一种兼顾经济增长、资源消耗与环境污染的新型发展理念,是区域实现高质量发展的必然选择。当前,工业集聚现象普遍存在,集聚类型多样。工业集聚可通过集聚经济效益与拥挤效应等对地区经济绿色发展产生影响。然而专业化、相关多样化与非相关多样化等不同类型集聚的影响效应不同,且同一类型集聚对不同区域的影响效应也存在差异。本文采用生态效率衡量工业绿色发展水平,从区域异质性和类型异质“双异质”性视角分析工业集
课堂教学评价是教育部2017年12月底颁发的《普通高中思想政治课程标准》的核心内容,其目的在于培育学生社会主义核心价值观,帮助学生明确正确的政治方向、提高思想政治学科核心素养,促进每一个学生的全面发展。思想政治课堂教学评价作为思想政治学科教学的重要组成部分,是改进和完善思想政治学科教学的主要依据之一。科学高效地思想政治课堂教学评价既能帮助教师查找自身课堂教学的优点,也能诊断出需要改进之处,从而为今
2019年12月28日全国人大审议通过修订后的《中华人民共和国证券法》,新增“投资者保护”章节,从法律层面进一步完善证券市场投资者保护制度。我国上市公司对投资者保护情有所改善,但濒临退市企业的中小投资者保护不容乐观,2018年《退市意见》修改后我国上市公司退市指标有所丰富,然而目前我国退市规定注重强制退市监管,对主动退市规定较简单,上市公司主动退市自主性较强,在退市时期信息披露、退市方案制定、退市
随着环境退化速度加快,对人类居住环境的压力越来越大。森林有着节水,防风防沙,气候控制和空气净化的功能对于改善人类生活环境非常有用。随着中国土地荒漠化、森林面积减少速度加快的现状,对森林采取生态保护的措施刻不容缓,研究森林生态环境监测系统有着重大意义。近几年,物联网技术与传感器技术已经取得了长足的发展,并且基于物联网技术的产品也是渗透到了人们生活的方方面面,给人们的生活带来了便利,提高了人们的办事效
滚珠旋压是一种变形面积小、旋压力低的逐点连续成形工艺,主要加工变形难度较高、塑性变形较差的金属材料。而镁合金在室温下滑移系少,塑性变形差,但市场上对变形镁合金的需求量大,故滚珠旋压工艺是加工镁合金的不错选择。本文研究对象为AZ31镁合金,通过对镁合金薄壁管滚珠旋压的数值模拟和试验研究,分析了镁合金薄壁管的旋压温升规律和应力-应变特点。本文的具体研究内容如下:(1)采用ABAQUS有限元软件对AZ3
图像语义分割作为基本的视觉任务之一,因其目标是对图像进行像素级分类,对其他视觉任务有极大的辅助和改善作用。而语义分割任务通常需要像素级别的标注数据,需要耗费大量时间和人力成本。本文基于卷积神经网络,通过引入生成对抗结构实现半监督语义分割。本文的主要工作如下:首先,针对现有半监督生成对抗网络处理分割任务时存在的多尺度特征融合不足以及判别精度较低的问题,本文提出一种改进的基于编解码对抗结构的半监督网络
细粒度图像分类又被称作子类别图像分类,是近年来计算机视觉领域一个研究热点,其目的是对粗粒度的大类别进行更加细致的子类划分。细粒度图像的类别精度更加细致,类间差异更加细微,往往只能借助于微小的局部差异才能区分出不同类别。本文应用注意力与深度学习相结合的细粒度图像分类模型,主要工作有以下两点:1)应用基于通道注意力的细粒度图像分类算法,针对细粒度图像分类任务存在目标的高判别区域不易受到过多关注,而且易
随着我国经济的高速发展,物联网已经与我们的生活息息相关,电梯物联网也在高速地发展中。电梯的安全问题在困扰着我们,因此,电梯的远程监测是电梯物联网中最迫切的要求。现阶段还很少对电梯曳引机进行监测。基于电梯物联网、利用软硬件协同以及监测分析的技术,完成了电梯曳引机监测系统,对电梯曳引机进行远程监测。首先,搭建电梯曳引机分析监测系统的硬件系统。根据理论和实际需求,设计电路系统框架,根据框架设计出电源模块