多智能体无人机协同防撞策略研究

来源 :沈阳航空航天大学 | 被引量 : 0次 | 上传用户:cyc528528
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在多无人机自主协同执行任务过程中,如何保证无人机不与环境中的障碍物和其他无人机发生碰撞一直是研究的重点与难点。受限于任务环境的不确定性和无人机决策过程的动态性,多无人机自主协同防撞过程难以精确建模。本文中提出了一种多无人机自主协同防撞策略,该策略可以应用于不同规模的无人机协同执行任务的场景。主要研究内容如下:(1)针对多无人机自主协同防撞过程不能精确建模的问题,提出了一种应用多智能体系统将多无人机协同防撞过程抽象建模为多智能体无中心式协同序贯决策过程再用多智能体深度强化学习方法对该过程进行求解的方法。(2)针对强化学习探索与利用的平衡问题,基于独立近端策略优化算法,提出了一种动态调节策略熵系数的方法。前期使用较大的策略熵系数增加探索使智能体无人机在学习过程中能够探索更多的动作,在策略能够完成任务后使用较小的策略熵系数增加利用,使算法能够更稳定的同时进一步提升算法性能。(3)针对神经网络输入维度较大时难以训练的问题,提出了一种只观测无人机可观测范围内5个目标并排序的观测空间设计方法。(4)基于以上改进,设计了多智能体无人机无中心式协同防撞策略及其训练流程。并在基于OpenAI Gym自主构建的仿真环境中对该策略进行了训练和验证实验。
其他文献
木质纤维素生物质通过热化学转化制备生物油是当前研究的热点。但生物油存在含氧量高、粘度大等油品低的问题,不能作为替代燃料直接使用。催化加氢作为生物油提质的一种有效方法,能够有效降低油中的氧含量。然而,加氢过程中气液传质阻力较大,需要消耗大量氢气,提高氢气的利用效率成为当前亟待解决的问题。氢气在溶剂中的低溶解度是造成加氢过程氢气利用率低的关键因素。而CO2在一定压力下更易溶于溶剂,能够形成一种具有超强
学位
随着人类的环境保护意识日益提高以及对能效的要求,对正处在高速发展阶段的四旋翼无人机提出了更高的要求。但是由于永磁电机存在固有齿槽转矩、稀土材料与控制芯片成本较高等缺点,制约了四旋翼无人机的发展,同时也因功率密度大、效率高等优点推动着技术革新。本文从电磁特性、损耗分析、热计算等角度设计了一个14极12槽的四旋翼无人机用外转子永磁电机(SPMSM),使得该电机在保证性能的同时,尺寸减小,质量降低。首先
学位
随着石化企业的迅速发展和石化产品产能的直线上升,人们对其安全生产的关注度日益提高。石化产品涉及到材料工业、农业以及交通运输等各个领域,在国民经济的发展中扮演着重要角色。而目前石油炼化企业生产所涉及的物料大多具有毒害性强、易燃易爆、扑救困难等危险特性,一旦发生事故将造成巨大的人员伤亡和财产损失。因此,本文对石油炼化企业进行风险识别、评估,设计了科学合理的保险方案并提出建议,这对降低石油炼化企业人员伤
学位
液-液两相流动广泛存在于液-液萃取、石油化工、直接接触式换热以及生物化学多相反应器等工业设备和过程中。深入了解液滴速度、形变、聚并、破碎等动力学特征,对提高过程效率,优化反应设备至关重要。屈服应力流体作为一种常见的非牛顿流体,被广泛应用于诸多的工业领域。屈服应力流体复杂的流变性质改变了液滴的运动行为,液滴在屈服应力流体中运动的相关理论仍有待完善。为此,本文借助实验手段和数值模拟方法,对屈服应力流体
学位
医学技术的高速发展产生了大量医学文本数据,其中蕴涵着大量的医学知识。随着信息处理技术在医学领域的深度应用,利用计算机辅助手段提取医学文本中的医学实体对医学诊断和研究具有至关重要的作用。目前,如何从海量的医学文本中有效提取有价值的医学信息,已成为医学文本挖掘领域一个重要的研究内容。医学命名实体识别可将医学文本中具有特定含义的实体,如疾病、药物、手术等进行识别和标注,为医学知识共享、辅助诊断、组建知识
学位
阅读理解任务是从文本中获得信息回答问题得到相应答案的任务,与传统的单跳阅读理解任务相比,多跳阅读理解任务需要更复杂的推理得到答案,因此也更加接近于现实,更具有挑战性。阅读理解模型通常在简单问题的阅读理解数据集达到较好的效果,而面对语义结构复杂的问题却难以正确理解,无法达到很好的回答效果。近年来,对于复杂问题的多跳阅读理解任务取得了一些技术的突破。但当前对于中文复杂问题的研究依然较少,另外缺少相关数
学位
随着我国科技旅游的兴起、政府对科普工作的高度重视以及学校自身发展的需要,使得航空航天博览园这一新型科普场所应运而生。本文研究的目的在于剖析符号互动论与航空航天博览园景观相互联系的基础上,将符号互动论介入航空航天博览园景观设计,通过明确设计原则,提出设计方法,细化景观要素表达三个环节,完成航空航天博览园景观的设计研究。本文首先通过文献法对国内外符号互动论及航空航天博览园景观的研究现状进行梳理,并对其
学位
无人机飞行控制系统是无人机的大脑,是保证无人机飞行姿态稳定和自主飞行的核心。PID控制是飞行控制中最基本的控制方法,因此PID参数整定效果直接决定无人机的飞行控制性能。在飞控系统的调试过程中,常用人工方法进行PID参数整定,该方法效率低下,且参数较差,难以满足无人机飞行控制性能的要求,因此进行无人机控制系统的PID参数整定优化方法的研究具有较大的工程意义。在多旋翼无人机中,四旋翼应用最广泛,因此,
学位
目前广泛用于民航飞机上的APU,例如APS3200、GTC131-9A、GTCP131-B、APS2300及APS2600A等型号的APU,OEM给出的平衡方案均为先对单一转子进行平衡,再通过改变装配时转子之间的相对位置来对整个转子系统进行平衡。由于转子之间的连接方式为键齿啮合,故OEM给出的具体平衡方法为试验法,即通过不断的改变转子之间的相对位置来进行试验,直到转子的不平衡量小于公差为止。这样对
学位
无人直升机具有不同的飞行模态,能够实现定点悬停、巡航、自主起降等功能,在农业、民用、军事等领域中应用前景广阔。电动无人直升机环保价值高、使用成本低,是无人直升机的一类重要分支。随着国际上提出“实现经济向绿色经济转轨”的思想,许多国家已经开展了电动飞机的研究,与此同时,我国也开始重点关注电动飞机的研发,其中电动无人直升机就是最热门的研究对象之一。稳定可靠的飞行控制系统是使电动无人直升机能安全完成飞行
学位