基于强化学习的智能干扰策略生成

来源 :电子科技大学 | 被引量 : 0次 | 上传用户:shuyun99a55
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着人工智能技术的发展,具备认知能力的通信干扰技术成为了当前的研究重点。认知通信干扰技术要求干扰机能够根据环境的变化实现自主学习,从而给出最优的干扰策略。在复杂多变的战场环境下,各种抗干扰技术的使用极大地增加了有效干扰的难度,因此,如何利用复杂多变的战场电磁信息智能地进行干扰波形决策成为了当前战场通信干扰领域亟待解决的问题。针对上述问题,本文基于强化学习理论,重点研究非合作条件下的智能干扰波形决策问题,具体而言,主要创新工作如下:首先,针对静态目标的最优干扰波形生成算法存在的交互次数多、学习时间长的问题,提出了一种设置固定或动态惩罚阈值并标记多个近似干扰波形的方法。该方法结合多臂赌博机模型和负强化学习的思想,通过对干扰效果差的干扰波形组进行联合惩罚,提高干扰效果好的波形被选中的概率,有效减少了干扰机的随机探索次数。仿真实验结果表明,与不加惩罚阈值的算法相比,本文提出的方法可以将学习速度提升约3倍的同时大幅提高干扰效率。其次,针对实际通信对抗过程中因采取各种抗干扰技术而导致通信方的状态发生改变的问题,提出了一种多状态下的最优干扰策略自适应生成方法。该方法将干扰目标的状态从静态扩展到动态,基于马尔科夫决策模型,使用Q-Learning和SARSA算法实现了对通信方的持续跟踪和精准干扰。仿真实验结果表明,和多状态下的多臂赌博机算法相比,该算法可以获得更高的干扰效率。最后,针对复杂多变的战场电磁环境下难以获取非合作条件下的干扰反馈问题,提出了0-1反馈、信道利用率反馈和数据包变化率反馈三种干扰反馈获取方法。该方法将侦察目标从单个被干扰节点扩大至整个通信网络,结合能量检测算法,从通信方的状态、信道和数据量的变化角度评估了干扰波形的干扰效果。仿真实验结果表明,使用上述三种非合作条件下的干扰反馈作为奖赏函数指导干扰机进行最优干扰波形学习,可以实现与合作条件下以丢包率作为奖赏函数进行最优干扰波形学习基本一致的效果。本文基于强化学习理论研究战场通信干扰中的智能干扰波形决策问题,充分利用其无需先验信息的优势,在复杂多变的战场电磁环境中,使得干扰机具备精准迅速、动态自适应的实时智能干扰能力,具有非常重要的应用价值。
其他文献
为更好地筛选适合华重楼(Paris polyphylla var.chinensis)人工栽培的微生物菌肥种类,为华重楼的产业化生产提供理论参考,本研究以华重楼为材料,采用高通量测序技术分析不同菌肥处理对华重楼根际土壤微生物多样性的影响。结果表明:经不同施肥处理的华重楼根际土壤中共检测出细菌类群23门57纲125目185科284属525种,真菌8门26纲54目66科69属82种。主要优势细菌门为变
20世纪90年代国外对阅读提出了这样的一个架构,以阅读圈(Reading circles)为指引,鼓励学习者从架构多元化元素出发,以指向阅读素材和语料为切入点,多支持阅读者主动融入情境中深入阅读体验。该种模式源于建构主义学习理念,强调以学生的认知与意义建构为主体,引导学生从不同侧面加强与文本的互动,
期刊
研究肇东盐渍土壤添加有机土壤改良剂和复合菌肥后,对盐渍土土壤盐碱化的改良效果及土壤微生物群落功能多样性对复合菌肥的响应。挖取黑龙江省肇东实验林场的盐渍土壤(0~30 cm土层,pH 9.05)运至人工池回填,池内统一添加有机土壤改良剂降低盐渍土壤盐碱性状,20天后栽植3年生枸杞苗,于枸杞发芽期施复合菌肥。设置有机土壤改良剂+细黄链霉菌、有机土壤改良剂+糠醛渣、有机土壤改良剂+糠醛渣+细黄链霉菌3个
[目的]研究微生物菌肥部分替代化肥对日光温室土壤细菌群落组成及黄瓜产量的影响,为黄瓜生产中化肥减量及提质增效提供理论指导。[方法]采用大田试验,以黄瓜“甘丰袖玉”为试材,设置100%化肥(2 400kg/hm2,T1)、60 kg/hm2微生物菌肥+80%化肥(T2)、60 kg/hm2微生物菌肥+60%化肥(T3)、60 kg/hm2微生物菌肥+40%化肥(T4)、对照(T5,不施任何肥料)、单
肺结核属祖国医学中“痨瘵”范围,其辨证论治多从“虚劳”中求之,关于本病的中医分型问题,颇多不同看法。我们根据多年来临床观察,以肺结核病的特点、症状、脉象、舌诊等为基础,通过辨证分析将本病分为四型,现结合200例患者的辨证分型论治情况简要介绍如下。
期刊
为解决大范围复杂山区DEM生产困难的问题,提出利用机载LiDAR点云数据构建DEM。本文对机载LiDAR数据处理流程及其在复杂山区的具体应用进行分析,主要利用LiDAR数据处理软件对点云数据进行内业DEM生产并编辑最终得到符合项目要求的数字高程模型数据,结果证明该方法可行。
为揭示秸秆还田与生物菌肥配施条件下土壤微生物群落与环境因子间的相互作用机制,进行2年玉米-马铃薯轮作定位试验,设置对照不施肥(CK)、常规施肥(CF)、秸秆还田+常规施肥(SCF)、秸秆还田+常规施肥+生物菌肥(SCBF)4个处理,利用磷脂脂肪酸(PLFA)和Biolog Eco板技术,研究秸秆还田配施生物菌肥对马铃薯根际土壤理化性质、土壤微生物群落结构与功能的影响,探明影响土壤微生物群落的主要驱
目的:研究血栓弹力图检测在指导大量输血患者血浆输注中的应用价值。方法:选取武汉市第一医院2016年8月至2018年5月间收治的大量输血患者150例,按照随机数字法,以每组75例为准,将其分为观察组和对照组。其中对照组患者实施常规凝血四项检查指导血浆输注,而观察组患者则采用血栓弹力图检测法。比较两组患者的血制品输注情况以及预后,同时比较观察组患者使用两种方法检测的阳性率。结果:观察组患者24 h内输
科学有效的教学评价可以帮助教师了解学生学习情况,让学生看到自己的长处和不足,从而更好地调整学习心态和学习方向,对提高学生的学习动力有积极帮助。新课程改革要求改变传统、单一的评价方式,采用多元化评价方式,更全面客观地对学生学习情况进行评价。教师要高度重视教学评价在教学中的应用,充分发挥教学评价的作用和优势,提高教学的质量水平。