基于强化学习的支持D2D通信的缓存策略研究

来源 :南京邮电大学 | 被引量 : 2次 | 上传用户:aska1982st
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着5G时代的到来,移动设备和物联网的大量应用,数据流量呈爆炸性增长。如何在确保用户Qo S和Qo E的情况下,对异构蜂窝网络系统进行流量卸载是一个要解决的重点。小基站的超密集部署成为一个解决方案,但基站超密集部署的花费较大,为解决该问题,许多研究者提出了无线边缘缓存的方案,在网络节点进行内容缓存能够有效提升网络性能,降低回程链路负担同时减少内容传输冗余。无线边缘缓存一般包括缓存内容放置和内容传递两个方面,缓存内容放置包含确定要缓存的内容、缓存的位置;内容的传递是如何将内容高效地传递给请求的用户。为了解决上述问题,本文研究的重点是在预测用户的移动性、内容流行度并结合用户社交关系等信息情况下,从而提出合理的内容放置策略以及内容传递策略。本论文的主要工作如下:一:基于D2D通信模型的无线边缘缓存替换策略:在无线网络边缘进行缓存能够极大地卸载网络流量,同时又能够满足本地移动用户对内容的请求。但是,在一些现有研究中假设内容流行度等于用户喜好是不严格的,因为内容流行度是根据特定时期内用户请求的统计数据计算得出的,而用户喜好则反映了个人用户请求内容的概率。本文对D2D与蜂窝分层网络的边缘缓存进行优化,优化结果是通过D2D通信链路最大化内容卸载量,在分析内容流行度、用户喜好和用户移动性前提下,推导出基于D2D通信模型的边缘缓存替换策略。首先证明问题是NP难题,然后采用一种基于Q学习的分布式内容替换策略。实验仿真结果证明我们采用算法的有效性。二:基于D2D通信网络的联合内容放置和内容传递策略的研究:D2D通信技术有望缓解网络压力,因为可以从附近的用户那里获取请求的内容,但是由于内容存储容量有限和用户移动性模式的不确定性,因此如何设计有效的缓存策略非常具有挑战性。在本文中,我们研究基于D2D网络的联合缓存内容放置和内容传递的策略。具体为:采用递归神经网络方法来预测用户的移动性和内容流行度,从而确定要缓存的内容以及在何处缓存。当用户的本地缓存难以满足其自身的请求时,用户可以考虑与邻近的一个或多个用户建立D2D通信链路以实现内容传递,为了决定与哪个用户建立D2D通信链路,我们采用基于深度强化学习的方法实现内容传递问题的动态决策和优化。实验结果表明所采用的内容放置策略可以很好地提高系统的缓存命中率,并且所采用的内容传递方法可以有效地减少请求内容传递的延迟和能耗。
其他文献
进行成本核算是提高非盈利组织决策能力的关键,是评价活动效果的基础,是生存和发展的基本条件,是考核组织成员工作绩效的基础,也有助于固定资产的核算与管理。非盈利组织进行
选区激光熔化技术是目前在金属增材制造领域中发展迅速的先进制造技术,已经在航空航天、汽车制造、生物医疗等行业获得广泛应用。该技术能够直接制造出复杂的形状和轻量化结
贵金属具有高活性、低温加氢等特点,在燃料油深度加氢脱硫(HDS)过程中能有效脱除噻吩类含硫化合物。综述了近年来贵金属在HDS领域的应用及其研究进展,重点讨论了单组分贵金属
探地雷达(Ground Penetrating Radar,GPR)作为一种无损探测技术,已被广泛应用到地质探测、考古、水利等研究领域。频率步进连续波(Stepped Frequency Continuous Wave,SFCW)
<正>在澳门兴建的威尼斯人度假村酒店,总建筑面积951000平方米。建筑师设计采用GRC制作各种主题建筑装饰,涉及装饰构件达2000
随着经济的发展,我国驴养殖业逐渐由家用、役用向规模化养殖发展,寄生虫病成为制约养驴业健康发展的主要因素之一。新疆是我国传统的驴主产区之一,近年来,新疆多地将驴养殖业作为区域特色经济发展的主要抓手之一,在扶贫攻坚过程中发挥了重要作用。为了解和掌握新疆地区驴肠道寄生虫感染情况,本研究采用饱和蔗糖溶液漂浮法检查新疆不同地区驴的粪便样本,通过形态学观察对部分虫种进行鉴定,采用PCR法鉴定隐孢子虫和十二指肠
研究目的:本研究旨在应用前瞻性对比研究的方法,以心脏骤停患者为研究对象,首先观察腹部提压联合胸外自动心肺复苏仪CPR与自动心肺复苏仪CPR对心脏骤停患者血流动力学、血气
<正>[设计师解析]提到蒙德里安,我们马上会想到那些规格不同的矩形方格子。本案运用"蒙德里安红黄蓝的直线美"为元素,采用大小不等的红、黄、蓝创造出色彩对比强烈却又稳定的
随着互联网时代+的来临,学生的就业环境、市场的岗位需求都发生了翻天覆地的变化,如何在大数据时代的新形势下,解决大学生供大于求的就业压力是我们目前亟待解决的问题。本文
中亚东干留学生是众多来华留学生中比较特殊的一个群体,他们不仅与我们有着相同的历史背景和文化根源,而且东干语是汉语在中亚的一种特殊变体,与我们陕西、甘肃的方言十分相