车载边缘计算网络下基于深度强化学习的动态资源规划研究

被引量 : 0次 | 上传用户:hyhlj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着车联网技术的发展与车载设备的不断更新,出现了大量计算密集且时延敏感型车载应用,对系统带宽资源以及终端的计算和数据处理能力等提出了严苛的要求。将移动边缘计算技术应用到车载网络所形成的车载边缘计算系统,能够通过任务卸载为其他移动设备提供计算服务,这种计算范式能够提高车载设备服务质量与系统内资源利用率。然而,由于车辆的移动性,导致车载任务卸载环境是动态变化和不确定的,具有快速变化的网络拓扑、无线信道状态和计算负载,这些不确定性使得任务卸载过程非理想化。并且传统的基于V2V的任务卸载方案更多关注资源分配,很少考虑由设备服务差异引发的通信安全问题,且忽视了任务卸载过程中的连续动作决策制定。为解决以上问题,本文制定由路侧单元(RSU)管理下高效的V2V卸载方案,提高车载设备的空闲计算资源利用率,并通过优化卸载决策与资源分配,降低任务延迟,在提高系统安全性能的同时满足用户体验质量。主要研究内容如下:1.在车载边缘计算系统中,针对车载任务卸载环境的不确定性,论文将移动边缘计算(MEC)服务器的计算资源下沉到车载设备,研究基于V2V的任务卸载的解决方案,使得车辆能够在未知状态信息的前提下学习周围车辆的服务性能并卸载任务。基于多臂老虎机框架,设计了一种二阶探索的强化学习算法,该算法将二阶卸载回报差值考虑在探索项中,进一步完善适合未知状态信息场景下决策对象的置信空间,以最大化用户平均卸载回报,并且在一个卸载阶段结束后建议了一种服务集更新方式,以保证用户的服务质量。仿真结果表明,与现有的基于置信上限的算法相比,本文所提方案下的卸载回报提高了约34%。2.针对VEC中的通信安全问题,提出了一种高效的基于信誉的V2V车辆协同任务卸载方案,该方案考虑资源提供者存在由于任务传输失败或计算时延过长而引发的数据安全隐患问题,为车辆制定可靠的卸载决策,并指导通信与计算资源分配。首先在建模时设计了一种信誉机制来评判车辆服务性能,该机制综合考虑资源分配情况、任务传输成功率、处理时延等因素。其次,设计了一种基于深度确定性策略梯度(DDPG)的任务卸载算法,以获得车辆协同环境下的最优卸载策略,有效解决连续控制问题,实现快速收敛。最后进行大量的仿真实验,结果表明,该方案相对于现有一些深度学习方案性能平均提高约16.3%。
其他文献
平方千米对于五年级的学生来说,抽象而难于直接感知,因此在实际教学中存在着不少问题与教学困惑。在这样的背景下,笔者带领团队,紧扣教材,就地取材,开发了具有鲜明地方特色的主题长线实践活动,利用数学活动生成的鲜活素材进行课堂深度学习,帮助学生进一步梳理活动经验,在面积单位概念的整体勾联中建立观念,发展思维,让平方千米的认识变得多维、厚重,充满儿童的情趣和数学的理趣。
期刊
文章选取2013—2019年中国沪深A股数字经济企业为研究样本,基于政策工具组合视角来考察促进数字创新的产业政策实践问题。研究发现,政府补贴、税收优惠对数字创新存在显著影响,其均能促进数字创新,但两者的组合实施与预期的目标政策结果存在差异,政策工具的组合实施导致了挤出和替代效应。影响机制分析发现,企业存在寻租行为,证实了企业在一定程度上不会将获得的补贴全部用于创新研发。进一步地,考察了政策工具组合
期刊
目的 了解住院老年患者跌倒警觉度状况,并分析其影响因素,为制定针对性跌倒预防措施提供借鉴。方法 采用便利抽样法选取782例住院老年患者为调查对象,使用一般资料调查表、Morse跌倒评估表、Barthel指数、跌倒警觉度量表进行调查。结果 有效调查住院老年患者695例,住院老年患者跌倒警觉度得分为(62.67±12.34)分。多元线性回归结果显示,自理能力、是否害怕跌倒及知晓治疗用药易致跌倒是患者跌
期刊
剪纸文化底蕴深厚、历史悠久,其在广告创意中的设计与运用提升了广告的艺术感染力和产品宣传效果,实现了广告宣传的更大价值。结合剪纸文化的文化意蕴、地域特色等探索剪纸文化在广告创意中设计与运用的注意事项,结合现代广告设计理念,将剪纸文化所包含的文化特色、文化意蕴等融入广告设计,科学、合理利用剪纸形式的图形、文字、色彩等元素设计新颖、感染力强、宣传效果好的广告作品。
期刊
科学评估中国家庭政策的实施特征与作用效果对提高政策适用性具有至关重要的作用。采用内容分析法,通过构建“政策工具—政策目标—治理主体”三维框架,分析中国政府1987—2021年颁布的中央层面的家庭政策文本,探讨中国家庭政策工具的类型特征、演进轨迹、价值倾向和内在不足。研究发现:在政策工具维度,家庭政策存在权威工具和能力建设工具偏多、激励工具和劝导工具使用不均衡、系统变革工具短缺等特征;在政策目标维度
期刊
<正>引言中国元素泛指能够体现中国文化的传统元素,我国是一个文化大国,传统文化积累深厚,从四大发明到丝绸之路,从战国青铜器到汉代画像石,从唐代绘画到明清瓷器,还有民间知名度较高的年画、剪纸、皮影戏等,都以不同的形态传承了下来。广告是信息化时代传递信息的主要途径,将中国元素融入其中既能促进传统文化赓续延绵,还能美化广告内容与形式,可谓是一举两得。
期刊
<正>平面广告设计基于大脑奇思妙想的表达技巧架构,是企业品牌推广宣传设计的重要方式,在于变换形式传达产品理念。剪纸在平面广告设计中的运用,是新视觉审美下的创新发展,能够让剪纸艺术在艺术设计中得到和谐,视觉感受上会更加的真实和写实,形成具有文化意识的艺术行为与审美体验。
期刊
期刊
目的 探讨加速康复外科理念整合方案实施中,影响外科手术患者住院天数的关键指标。方法 对2021年12月—2022年1月复旦大学附属中山医院普外科及胸外科住院并行择期手术的患者实施加速康复外科理念整合方案;前瞻性收集并分析所纳入患者的基本资料,及加速康复外科实施要素的16项关键指标(涵盖静脉血栓栓塞评估与预防、营养风险筛查与干预、缩短术前禁食禁水时间、疼痛管理、预防术后恶心呕吐、预防术后肺部并发症、
期刊
<正>“以学增智就是要从党的科学理论中悟规律、明方向、学方法、增智慧”。习近平总书记在陕西调研时深刻阐述了以学增智的内涵,从提升政治能力、提升思维能力、提升实践能力三个方面提出明确要求。广大党员干部要把思想统一到习近平总书记重要讲话精神上来,把“看家本领、兴党本领、强国本领”学到手。
期刊