【摘 要】
：
网络规模的快速增长加剧了无线Mesh网络流量分布的复杂性和动态性,给路由算法的设计提出了更高的要求。传统基于单点转发的路由策略需预设网络流量特征,易出现拥塞且难以匹配网络状态变化。因此,本论文提出融合机会路由与强化学习来构建路由策略,利用机会路由的多点转发思想缓解拥塞,同时应用深度强化学习来适应网络拓扑和负载的动态变化,并联合考虑不同性能指标来优化路由选择。本论文主要研究内容如下:1、介绍并分析了
论文部分内容阅读
网络规模的快速增长加剧了无线Mesh网络流量分布的复杂性和动态性,给路由算法的设计提出了更高的要求。传统基于单点转发的路由策略需预设网络流量特征,易出现拥塞且难以匹配网络状态变化。因此,本论文提出融合机会路由与强化学习来构建路由策略,利用机会路由的多点转发思想缓解拥塞,同时应用深度强化学习来适应网络拓扑和负载的动态变化,并联合考虑不同性能指标来优化路由选择。本论文主要研究内容如下:1、介绍并分析了强化学习对无线Mesh网络路由性能的影响。以单点转发路由策略为例,初步探索并分析了融合强化学习的路由策略设计,为更为复杂的基于多点转发的智能路由策略设计与优化提供基础与比较基准。2、综合考虑无线Mesh网络的路由性能与节点负载均衡,研究了基于强化学习的机会路由策略。首先,定义了联合考虑链路传输失败次数和节点负载的奖励函数,基于马尔可夫决策建模了机会路由策略中的节点组选择问题。通过调控权重系数,能满足不同的应用需求。进一步,提出了基于Q学习的机会路由算法。3、综合考虑无线Mesh网络的路由性能与节点负载及能量均衡,研究了基于深度强化学习的机会路由策略。使用深度强化学习技术将原决策问题中Q值表的计算及更新通过深度神经网络框架转化为函数的拟合问题,解决了高维状态下Q值表的存储及计算开销问题。同时,将节点剩余能量考虑进奖励函数的设计中,以避免部分节点能耗过高。进一步,设计了基于深度Q网络（Deep Q Network,DQN）的机会路由算法。
其他文献
背向散射通信技术摒弃了传统的高功耗模拟器件,具有超低功耗与超低成本的独特优势,被视为构建低功耗物联网的重要解决方案。然而,现有的多背向散射节点并行传输方法难以实现广域均匀覆盖。分布式MIMO技术充分挖掘空间维度来提升系统性能,同时通过天线间协作来保障更广阔、均匀的覆盖,有望解决上述问题。因此,本论文致力于探索分布式MIMO应用于背向散射通信系统的潜力,通过定量分析不同信道模型和背向散射架构下的分布
随着利率市场化改革、金融脱媒及金融科技发展等诸多因素的影响，商业银行竞争压力不断加大。商业银行零售业务由于具有业务量大、占用资本少、风险分散以及易与中间业务结合等相关优势，同时能够平衡传统对公业务以及银行间业务潜在的波动性风险，成为商业银行转型和创新突破的战略方向。通过与欧洲银行业相比较，本文指出我国银行零售业务存在的问题，提出我国银行要借鉴欧洲银行业的经验，促进我国商业银行零售银行转型。
随着互联网规模的发展与企业数字化建设的加深,企业数字化转型进入深水期,自动驾驶网络作为新一代智能网络管理方案,凭借其运维自动化、业务定制化的特点得到了重视。原有针对单个网络域管理的方式在向自动驾驶网络演进时将不可避免的遇到单域自治、跨域协同的融合过渡问题。在整个过渡期间,跨域网络拓扑快速还原操作会在运营商运维时间段内频繁发生,其性能和效率将极大影响自动驾驶网络的融合推进。本文针对自动驾驶网络的基础
通信系统的开发,从设计、实现,直到最终的测试验证,整个工作过程较繁琐,周期较长。为快速实现窄带通信系统的原型验证,本文提出建立针对窄带通信的快速原型开发验证平台。该平台需满足三点需求,一是要支持matlab算法的直接运行,无需将matlab算法改为verilog和C,即可实现载波调制信号的发射和接收,从而方便对信号进行加噪声测试,对算法进行原型验证;二是具备高动态范围,平台的接收机要能够接收大范围
随着国内科研领域信息化建设的飞速发展,科研管理平台积累了海量数据。基于海量数据构建的科研领域知识图谱,也为科研管理数据的深度应用奠定了基础。一方面,随着科研数据的日益增长,科研人员面临日益严重的信息过载问题,需要更高效的工具帮助科研人员过滤信息;另一方面,科研人员希望能获取个性化科研信息,并与具有相同研究兴趣的人员交流合作。科研项目作为科研人员在所属科研领域研究内容的集中体现,具有很高的参考价值。
水声通信是实现水下万物互联的关键技术,也是联接空天海地一体化信息网络的重要纽带。在众多宽带水声通信技术中,差分相干检测正交频分复用（Orthogonal Frequency Division Multiplexing,OFDM）技术因在对抗多径干扰以及降低信道估计依赖等方面表现卓越,成为新一代高速水声通信的国际研究前沿。然而,要在复杂恶劣的水下环境实现差分OFDM信号精准检测极具挑战。具体而言,水
生命体征检测在医疗、健康监护、灾后救援等方面有重要应用价值。传统接触式检测方法（如:运动手环、医用心电监护仪、心率带等）对于特殊人群及环境并不适用,具有较大局限性,因此非接触式生命体征检测的研究具有重要意义。毫米波作为一种新型的非接触式检测方式,具有全天候,距离分辨率高,无隐私泄露,体积小等优点,在生命体征检测方面有广阔应用场景。生命体征探测提取包括人体目标定位及生命体征参数估计,围绕这两个问题,
为进一步优化道路交通环境,预防和减少道路交通事故,降低城区碳排放,全国各城市均积极推动中心城区高排放大货车限行禁行措施。本文面向江西省某市交警支队高排放车辆限行管理系统需求,针对城市每日过车抓拍图片数据量大,基于人工审核准确率低工作量极大,与通行证对比出违法通行记录效率过低,缺乏可视化数据分析等问题,基于互联网与人工智能技术,研发了一套面向智慧交通的城市高排放车辆限行管理系统。本文首先针对现有系统
近年来海洋军事通信、海底矿物探测等业务需求日益增多,磁感应（Magnetic Induction,MI）通信依靠耦合线圈感应的磁场分量进行通信,有速率高、天线结构简单等诸多优势。这种近场通信方式在土壤、油藏等恶劣环境中应用效果良好,为水下通信提供了新思路。本文结合磁感应通信特点,对水下磁通信传输图像的实际应用展开研究。首先分析磁感应传输原理及通信模型。分析了水下电磁波和磁感应信号的传输特性,包括频
随着基于位置信息的各种室内智能服务的广泛普及,低成本高精度的室内定位技术成为国内外研究的热门方向,其中基于蓝牙的室内定位技术以低成本、低功耗、应用广等特点受到广泛关注。2019年1月,蓝牙技术联盟在蓝牙5.1协议中新增了“寻向”定位功能,将天线阵列技术引入了蓝牙平台来实现定位精度的进一步提升。相比于基于接收信号强度（Received Signal Strength Indication,RSSI）