面向跨数据中心应用的资源管理技术研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:candy0533
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
进入21世纪以来,地理分布式的公有云平台已成为最为普及的互联网基础设施。在云平台上部署应用服务具有投入低、性能高、可移植性强等优势,目前已成为互联网公司的首选方案。然而,在进行跨数据中心的应用部署时,由于应用实时性要求高,数据中心间流量大,以及同类应用相互竞争等原因,使得跨数据中心应用的资源管理面临着网络传输实时性难以保障,网络传输费用居高不下,以及竞争环境下资源分配方案难以制定的问题。为此,本文从面向应用实时性的跨数据中心网络流量调度技术,低传输费用的跨数据中心网络带宽管理技术,以及跨数据中心应用竞争环境下多资源管理技术,三个方面开展具体研究工作,所取得的创新成果如下:
  首先,本文提出了兼顾公平性和截止期限保证的跨数据中心网络流量调度算法——TINA。在该方法中,首次提出了随机型流量调度的思想,与传统确定型流量调度相比,在保证数据传输请求截止期限的同时,兼顾了调度的公平性,从而有效解决了服务干扰问题。该方法由访问控制机制和保证截止期限的优先级分配机制两部分组成。前者用来决定每个待传输的请求是否可以获准发送,后者为获准发送的数据传输请求分配合适的发送优先级。实验结果表明,TINA在没有牺牲网络吞吐量、链路利用率、总体效用和请求接受率的前提下,有效地提升了公平性和截止期限保证率,同时还降低了计算开销。
  其次,本文提出了流量信息不可知情况下具有低传输费用的跨数据中心网络数据传输机制——RIFT。通过设计请求切分机制,将长期数据传输请求分割成一系列短期数据传输请求,从而解决在跨数据中心流量信息不可知的情况下,由云租户订购分层计费的跨数据中心网络传输服务时,所产生的带宽资源超额配置问题。该机制持续在线预估短期数据传输请求的流量规模,同时为每个短期数据传输请求确定合适的截止期限和服务等级,从而实现传输费用和传输截止期限保证之间的权衡。此外,本文还讨论了云服务提供商的反制措施对该方法的影响及算法的最优性。实验结果表明RIFT最多可以为云租户降低59%的跨数据中心网络传输成本。
  最后,本文研究了信息不完整的竞争环境下跨数据中心应用多资源分配方法,提出了跨数据中心应用竞争关系模型并给出了基于机器学习的资源分配方法。该方法首先将竞争环境下跨数据中心应用的多资源分配问题分解为多数据中心预算分配和单数据中心资源分配两个子问题,然后分别将两个子问题建模为上校博弈问题和线性优化问题,并分别求出其最优求解,从而得出部署跨数据中心应用的最优资源分配方案。实验结果表明对于在竞争中处于相对弱势的一方而言,选择放弃一些区域然后将其资源集中在一些特定区域是更好的资源分配方案。
  综上,本文所提出的方法可以为跨数据中心应用提供网络传输截止期限的保障,降低网络传输费用,提高应用在竞争环境中的经济利益。本文方法简单、高效、具有可扩展性,且易于部署,具有广阔的应用前景。此外,本文有待对跨数据中心网络和数据中心内部网络的资源统筹管理进行深入研究,这将作为后续研究方向。
其他文献
随着大数据时代的飞速发展,数字图像在互联网上的应用和传输已经比过去普遍得多。因此,图像的加密和压缩技术对公共网络上的实时传输和存储至关重要,具体分为两个阶段,第一阶段防止信息泄漏,第二阶段减少信息数据量。传统的分组密码DES、AES最初是为加密文本数据而设计的,并且被发现不适合于具有高像素相关性和冗余特征的数字图像加密。现今,研究人员已经注意到混沌系统的基本特征具有较为理想的密码属性,可以作用于图
学位
近年来对数据安全的要求逐渐提高,密码系统的安全性变得尤为重要。混沌系统因其伪随机性、对初始条件极为敏感等优良特征被应用于密码学中。混沌密码系统的安全性一般通过经典的统计学测试来进行评估,例如SP 800-22测试,雪崩测试等,对混沌密码系统的攻击也主要使用数学手段。然而密码系统运行时会泄露能耗、电磁、声音等旁路信息,这些信息往往和密码系统所处理的数据有关。旁路攻击利用密码系统所处理的中间数据和旁路
学位
随着大数据和人工智能的不断发展,网络系统的设备数量增加,网络系统部署工作量和难度越来越大。运维人员和现场网络配置人员在配置过程中,经常需要做一些重复性的配置工作。传统的网络配置一般需要接口配置、相应链路速度以及网络协议等。在小型网络中,这种情况可以简单容易的实现且基本不会发生错误,一旦发生错误也可较高效的对问题做到解决。但在大型网络中,这显然是一个很繁琐的过程。本文在原有Python技术支持下提出
学位
冲击地压是在煤岩开采过程中发生的动力破坏现象,由于复杂的地质条件和多样的开采方式使冲击地压具有较强地模糊性、非线性。冲击地压灾害的发生往往会造成较大的人员伤亡和财产损失,因此精准地预测冲击地压对于煤岩安全稳定开采具有重要意义。  论文首先分析了煤岩冲击地压前兆特征信号中的声发射信号、应力信号和红外辐射信号的变化规律。针对单一的前兆特征参量不能完整的表征冲击地压发生状态等问题,提取声发射振铃计数和信
学位
随着互联网的不断普及与发展,越来越多的用户选择互联网作为获取信息的第一渠道。与此同时,随着全面小康时代的到来,人民对精神文化娱乐的需求日益增强促进着电影文化产业蓬勃发展。面对互联网中海量的电影及评论数据,利用情感分析技术对评论数据进行分析,挖掘评论文本中隐含的情感倾向与价值趋向,一方面为消费者作出消费决策时提供参考意见,另一方面可以帮助电影创作者了解观众喜好与市场需求,从而创造出更加优秀的电影作品
学位
“一带一路”政策的推行掀起了“汉语热”的狂潮,然而,不少把中文作为第二语言的外国学习者都遇到了汉语学习难的问题。如传统汉语学习模式单一,教学资源缺乏以及语言差异等。人类感知交流是一个多感官过程,视听多模态信息可以有效促进语言的理解与学习。智能辅助语言学习,就是通过为学习者提供有关发音器官运动的指导,增强学习者对发音的理解,更准确地掌握发音规律,从而在一定程度上有效解决了汉语学习难的问题。  考虑到
学位
轻度认知障碍(MCI)是阿尔兹海默症(AD)的前驱阶段,对轻度认知障碍所处阶段的精确诊断具有重要意义。本文旨在通过对静息态功能磁共振成像(rs-fMRI)信号进行直接分析建立诊断不同阶段(早期和晚期)的轻度认知障碍的分类框架,并通过总正确率,特异性(晚期MCI的正确率)和敏感性(早期MCI的正确率)评价其分类性能。  通过应用解剖自动标记(AAL)模板,将受试者的所有fMRI图像分割为116个感兴
差分隐私是一种严格的、可证明的隐私保护方法。与其他隐私模型相比,差分隐私可以成功抵御大多数隐私攻击并为数据集中的单条数据提供隐私保护。信息的实时发布使得越来越多的在线系统挖掘和分析个人的信息,讨论并设计更先进的差分隐私在线学习算法具有非常广泛的实践意义。但现有的差分隐私在线学习方法在适用范围上有很大的局限性,且算法的准确性较低。针对该问题,本文提出一种更通用、更准确的差分隐私在线学习方法。主要内容
学位
广告点击率(Click-through Rate, CTR)预估是在线广告推荐中的一项重要研究任务,它旨在预测用户在广告显示中点击广告的可能性。最近,随着神经网络在很多领域都取得了不错的成绩,越来越多的研究人员提出了基于神经网络的模型用于CTR预估任务中。这些基于神经网络的CTR预估模型一般只通过原始特征去学习低阶和高阶特征交互。然而,原始特征通常都是高维稀疏的这使得神经网络模型很难在大量参数下学
学位