基于自决策的分布式代理缓存技术研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:ye14382163
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着IT技术的进步,互联网已经深入到了人们的日常生活之中,各种网络服务也开始迅速增长。但是,巨大的网络流量已经造成了用户之间的网络拥塞问题,导致网络的服务质量和用户体验降低。网络服务供应商迫切需要一种技术来减少网络传输负载和服务延迟时间。HTTP的流量占互联网总流量比例很高,HTTP代理缓存技术既能降低网络通信的负载,又能有效的解决上述问题。分布式的代理缓存系统能够满足巨大的访问量,该系统的整体性能直接依赖于缓存管理技术。为了实现高效、自动的缓存管理,本文提出了一种基于自决策的分布式代理缓存管理机制,其中运用到了自感知和自决策的思想。首先,介绍了代理缓存的自主管理模型和基于自决策的代理缓存管理手段,根据反馈环的思想建立了代理缓存的自主管理框架。然后,采用了基于相关系数的加权平均值法,分析了缓存的监测项和识别缓存的状态;采用了带虚拟节点的哈希环机制,实现了URL空间在缓存节点之间的均匀分布;提出了序列间隔约束的分类方法,选取需要调整的缓存节点;提出了基于历史状态序列和灰色预测模型的方法,制定缓存状态调整策略;提出了基于域名聚合的内容热度预测方法,从而迁移热度较高的URL,降低缓存节点的负载。其次,依托于代理缓存的自主管理框架,运用自决策的缓存管理机制设计了分布式代理缓存管理系统,并提出了CHSM(Cache Hot Spots Migrate)算法实现了哈希环上虚拟节点动态的迁移和融合;使用状态序列和其对应的调整策略构建了系统知识库。最后,通过分析哈希环、内容热度预测以及缓存状态自决策调整的实验结果,表明了基于自决策的分布式代理缓存管理机制能够高效、自动的管理缓存节点,并提升了系统的整体性能。
其他文献
人脸识别作为一种典型的生物特征鉴别方式,已经成为模式识别领域中一个重要的研究方向,具有广阔的应用前景。近年来移动互联网的迅速发展对人脸识别的应用也随之产生了新的需求
随着计算机互联网技术的发展,实时数据流成为数据信息中一种重要的数据形式,且已被广泛应用于网络流量控制、数据监测系统、互联网金融等领域。如何快速有效的从高速、大量的
目前,随着手机普及率的提高,加之社交网站、购物网站的普遍应用,手机注册的普遍性,用户手机号已成为商家广为利用的营销工具。随之而来的垃圾短信,不仅占用网络资源,干扰用户
分布式信源编码(Distributed Source Coding, DSC)主要研究多个信源的独立编码和联合解码。它的理论基础是Slepian-Wolf理论和Wyner-Ziv理论。分布式视频编码(Distributed Vi
智能电网的快速发展,使智能电表、量测系统等应用增加,从而使数据的规模和种类呈直线式增长,海量电网数据的安全存储问题成为制约智能电网发展的瓶颈。云存储技术可以使用虚拟化技术把物理资源整合成统一的存储资源,支持海量数据的存储,其具有数据处理量大、灵活性强和高可靠性等优点,可以解决海量电网数据的存储问题。但是使用云存储电网海量数据时,如何保证电网数据存储的完整性是智能电网云存储系统发展过程中面临的挑战,
无线射频识别RFID(Radio Frequency Identification)技术是一种非接触式自动识别技术,利用射频信号通过传递消息来实现识别。随着RFID技术的不断发展,安全和隐私问题受到人们越
随着Web2.0时代的到来,人们渐渐从信息接收者转变为信息创造者,信息分享也变得更加容易,人们在享受着互联网带来的便利的同时,也逐渐被信息过载问题所困扰。面对浩瀚的、令人
随着互联网高速发展,网络中的信息飞速增加更多的人参与到互联网中进行发言和互动交流为充分地分析和预测舆论走向和趋势,互联网舆情相关技术应运而生截止到2012年,中国网页总数
四点接触球轴承跑合装置作为一个测试卫星零部件的设备,主要用于测试控制力矩陀螺用四点接触球轴承,在轴承装入整机前需要对其进行跑合。轴承内部的配合和摩擦力矩是轴承的重要技术指标,而轴承内部的配合和摩擦力矩受到多种因素的影响,而这些影响需要通过分析测试设备的跑合数据得出结论。本课题主要描述四点接触球轴承真空跑合装置控制系统的设计与实现。本文首先论述了四点接触球轴承跑合装置的总体结构设计,给出了各个部件的
微博的开放性与便捷性,使得微博己经成为了网络舆论传播的一个重要平台。但是微博信息量大,传播速度快,这给网络舆情的收集和管理工作带来了挑战。因此,如何从微博信息流中及