基于强化学习理论的MAC协议认知干扰技术研究

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:lbfjm78
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在通信干扰中,利用被干扰目标网络的介质访问控制(Medium Access Control,MAC)协议实施干扰,能够提高干扰效能。然而,在实际应用中,实现MAC协议干扰具有较大的难度,主要体现在以下两点:一是MAC协议类型的识别。在不同类型的MAC协议中,如分配类MAC协议和竞争类MAC协议中,节点的通信行为规律差异较大,应当相应采用不同的干扰方式,因此,需要研究非协作条件下的MAC协议类型识别方法。二是直接求解最优的干扰参数较为困难。一方面,最优干扰参数值与目标网络的MAC协议参数有关,但在非协作条件下,尤其是通信系统采用加密技术时,干扰方难以获取相关参数信息;另一方面,由于MAC协议流程的复杂性,难以从理论上分析不同干扰参数下的干扰效果,以及建立干扰效果的理论模型。传统干扰方式由于技术限制,难以解决上述问题。认知无线电技术赋予无线通信设备强大的感知与学习能力。将认知无线电思想应用于无线通信干扰,实现认知干扰技术,有望提升干扰系统的作战效能。认知干扰系统是一个由“观察、决策、评估”组成的动态闭环系统,采用机器学习方法提升系统的感知能力与学习能力。本文将机器学习中的强化学习理论分别应用于观察和决策环节,解决MAC协议干扰中的协议类型识别和干扰参数优化问题。本文工作的主要贡献和创新总结如下:1)针对干扰方无法直接获知目标MAC协议类型的问题,提出了基于功率检测和选择性集成分类算法的MAC协议类型识别方法,解决了非协作条件下分配类MAC协议和竞争类MAC协议的识别问题。在现有特征的基础上结合碰撞概率估计和发送时间周期性估计特征,提高识别效果。采用基于强化学习的选择性集成分类算法,提高分类系统的泛化能力。对OPNET软件得到的仿真数据进行分类实验,结果表明,采用相同分类算法时,结合所提特征得到的识别效果更优;采用相同特征时,当识别目标网络与训练样本的网络参数,如通信负载不同时,所提算法能够有效提升识别效果。2)针对分配类MAC协议干扰中,不同信道上的干扰功率的分配优化问题,提出基于强化学习的分配类MAC协议认知干扰功率分配算法,实现了未知干扰目标接收机位置的条件下,干扰功率分配方式的在线优化方法。利用强化学习中的多臂赌博机模型分析干扰功率分配问题,将干扰功率分配方式作为模型中个体的动作,通过统计目标网络通信负载变化评估干扰效果,并将其评估作为个体的收益,并采用置信区间上界算法在线优化个体的动作。仿真结果表明,该方法在未知目标接收机位置的情况下,通过在线学习,能够收敛到最优的干扰功率分配方式。3)针对竞争类MAC协议干扰中,由于帧传输流程的复杂性,对干扰不同帧类型和不同干扰概率的干扰效果进行理论分析较为困难的问题,提出基于强化学习的竞争类MAC协议认知干扰算法,分别实现了干扰帧类型参数和干扰概率参数的在线优化。由于加密条件下干扰方无法直接获知帧类型,本文通过提取帧传输时间间隔特征,利用聚类算法区分帧类型,并根据帧类型的传输规律评估干扰效果。利用多臂赌博机模型,将干扰效果评估作为模型收益,分别将干扰帧类型参数和干扰概率参数作为模型动作,并采用置信区间上界算法实现根据收益在线优化动作。在OPNET中的仿真实验表明,在干扰单个网络时,当算法的加权参数取适当的值时,该方法的干扰效果接近传统干扰方式,同时能够有效减少干扰能量消耗;在干扰多个网络时,经过一段时间的学习后,该方法的干扰效果优于传统干扰方式。
其他文献
持续有效地保护农村妇女的土地权益,不仅保护了妇女的平等权和发展权,也保护了全社会的平等权和发展权。我国农村妇女的土地权益保护现状不尽如人意,妇女因为结婚、离婚等情况在
目前,高校科研经费管理尚存在种种问题,对科研经费进行内部审计可以起到一定的风险防范作用。文章分析了当前高校科研经费内部审计存在的一些问题,并提出了高效开展相关内部
本文总结了室内模拟钻进试验台钻进碎岩试验的声发射监测的部份研究结果。根据试验资料建立了钻进碎岩时声发射响应的三种典型模式,为正确、快速选择钻进规程和判别岩性及孔
目的:研究人卵母细胞发育潜能与颗粒细胞凋亡之间的关系。方法:将卵子在体外经过28~30 h培养后,取其颗粒细胞,用TUNEL法进行凋亡率的分析,并与卵子的成熟情况和卵子的评分及形
本次翻译实践选自2015年华盛顿大学出版社出版的《企鹅:自然历史与保护》第三章。本章主要内容是介绍黄眼企鹅科属名字、形态特征、分类地位等,是一篇非常典型的科普类文本。既体现了科普文本的专业性和科学性,又展现了其趣味性和文学性,给本次翻译实践带来挑战。本报告总结了原文本在词汇和句法两个层面的难点。在词汇层面,难点主要集中在专业和技术词汇的翻译,包括动物名称、身体部位、地理、生物学词汇等。在句法层面,
研究我国当今地缘政治、军事等关系时,常常涉及"战略方向"。战略方向,是根据国家安全和国家利益所确立的军事战略进攻方向或防御方向。在中国历史上,随着社会生产力和社会形态
期刊
民族手工业是西藏历史上劳动密集型的三大传统产业之一。山南蕴含着十分丰富的文化资源,素有“氆氌之乡”、“围裙之乡”、“木碗之乡”等美誉。山南民族手工业历史悠久,民族手工业产品种类繁多,工艺独特,民族特色鲜明,文化内涵丰富,与广大农牧民生产生活息息相关,深受国内外游客的喜爱,是“藏源”文化传承和发展的重要载体,是西藏手工业的典型代表。本文在综述国内外关于西藏民族手工业以及山南市通过对山南市特色文化和民
我国水环境的污染现状相当严重,由水污染造成的经济损失也相当惊人。城市污水处理不仅可以缓解水污染带来的环境与经济压力,同时亦是开发第二水源解决城市用水问题的重要措施
自从生命产生的那一天起,色彩也就随之出现了,可以说色彩的发展历史比人类的历史还要长。人们看到不同的色彩会有不同的心理感受,所以人们逐渐学会了将色彩融入产品设计中去,
毫米波波长介于光波和厘米波之间,兼有光电制导和微波制导的优点。毫米波雷达作用距离远、可靠性高、不受光线等的影响,具有全天候、全天时的特点,且有一定的穿透能力,抗干扰能力强,能够适应复杂的环境。基于调频连续波原理的雷达通过对连续波进行频率调制,根据发射信号和回波信号的频率差、相位差来获取目标的距离、速度、方位等信息。毫米波调频连续波雷达在军事上可用于机载、弹载毫米波制导应用等,在无人机避障和汽车雷达