强化学习模式下舰船多状态退化系统的维修策略

来源 :中国舰船研究 | 被引量 : 0次 | 上传用户:lutaixiaoxin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
[目的]舰船的船体结构、武器装置及动力设备等系统在服役期间的性能退化将增加全寿命周期的运行风险,故须根据实船退化情况开展视情维修策略研究.[方法]基于马尔科夫链建立多状态退化系统模型,利用强化学习方法训练产生维修策略的代理,在自适应学习过程中得到最优维修策略.[结果]某船舶结构退化系统的验证结果表明,该方法可以在考虑系统实际退化状态下实现最优维修策略的快速响应,为决策者提供视情维修策略的智能化辅助决策工具.[结论]舰船视情维修策略与强化学习相结合是一种提升舰船装备维修决策技术水平的可行方法.
其他文献
船舶自动识别系统(AIS)船载设备在2075/2076信道播发卫星AIS报文(27号报文),以实现卫星对船舶AIS信号的有效探测.近日,AIS国家中心监测到中国沿海存在部分船载AIS设备通过2087/2088信道播发卫星AIS报文的异常播发行为,影响船舶航行安全.通过对此问题的成因和机制进行分析,研究其可能造成的危害,提出了相应的对策和建议.
[目的]旨在研究密集障碍物海况下无人艇的自主避障问题.[方法]为此,提出一种基于模糊推理的改进型双窗口动态窗口法(DWA)避障算法,即在常规速度窗口的基础上设计基于艇载传感器的感知窗口,构成双窗口模型以进一步优化约束速度空间,然后根据障碍物的分布,动态调整评价函数权值.[结果]仿真实验结果显示,相比原始DWA算法,改进算法在未知密集障碍物海况下规划的路径更加合理、光滑,可避免无人艇从密集障碍物群外绕行,同时确保了避障航行安全性,迭代次数和运行时间可缩短20%以上.[结论]研究成果对无人艇自主避障技术发展具
[目的]作为船舶航行安全的核心问题,若船舶避碰完全依赖船长的个人状态和判断将存在一定的安全隐患.为了统筹关键水域上所有船舶(游船、货船等)并进行路径预测,需要建立防碰撞预警机制.[方法]利用深度确定性策略梯度(DDPG)算法和船舶领域模型,采用电子海图模拟船舶的航行路径,提出基于失败区域重点学习的DDPG算法改进策略,并针对游船特点改进的船舶领域模型参数等改进方法,提高航线预测和防碰撞准确率.[结果]使用改进的DDPG算法和改进的船舶领域模型,与未改进前的算法相比,船舶避碰正确率由84.9%升至89.7%