基于Spark的内河船舶轨迹实时异常检测方法研究

来源 :武汉理工大学 | 被引量 : 2次 | 上传用户:Elmo761129
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着我国内河航运的繁荣发展,如何保证内河船舶航行安全成为亟需解决的问题。每年我国内河水域都有船舶碰撞、搁浅等水上交通事故发生,给人民的生命安全和财产带来巨大损失。而对船舶轨迹进行实时异常检测,能及时发现那些异常轨迹船舶,并给出预警,从而防微杜渐,有效避免船舶安全事故的发生。本文以内河船舶轨迹为研究对象,从船舶轨迹快速聚类、船舶轨迹实时异常检测以及船舶典型轨迹模型动态更新三方面对船舶轨迹进行研究。主要工作及创新如下:(1)设计了船舶子轨迹间相似性综合度量方法由于内河环境复杂,不同航段的航道条件不同,本文首先依据航道特征将研究水域划分为限速航段(汇流、渡船、桥区等)、限宽航段(宽航道/窄航道)以及弯道航段,从船舶子轨迹位置、航向以及航速三方面综合度量船舶子轨迹间相似性,并依据分区航段特征,分配不同的距离权值,从而能更准确地衡量船舶子轨迹间相似性。(2)设计了Spark下基于快速聚类的内河船舶典型轨迹模型构建方法由于船舶轨迹数据具有高维复杂、数据量大等特征,针对现有密度峰快速聚类算法的不足,改进了局部密度的计算方法,并对多聚类中心的类簇进行合并,设计了适用于船舶子轨迹的快速聚类算法。另外,结合航道分区处理,在Spark平台上实现并行化船舶子轨迹快速聚类,提高聚类效率,并依据各分区航段聚类结果构建船舶典型轨迹模型。最后利用已有AIS数据实验验证了算法的可行性及有效性。(3)设计了基于Spark Streaming的内河船舶轨迹实时异常检测方法为了满足船舶轨迹实时异常检测对于准确性以及时效性的要求,利用Spark Streaming框架处理实时流数据的高效性,设计了基于Spark Streaming的船舶轨迹实时异常检测方法。本文将船舶轨迹异常分为三类:船舶轨迹位置异常、船舶轨迹航向异常以及船舶轨迹航速异常,首先依据构建的船舶典型轨迹模型,对实时到达的船舶轨迹点进行船舶轨迹位置异常实时检测;考虑到单个轨迹点航向或航速异常不足以代表船舶轨迹航向异常或航速异常,因此,对于位置正常船舶轨迹点,取该船舶最近若干位置正常轨迹点构成轨迹段,使用轨迹段替代轨迹点进行船舶轨迹航向异常以及航速异常实时检测,并使用各分区航段阈值代替全局阈值提高检测精度。最后使用实时AIS数据验证了该算法具有较好的准确率以及时效性。(4)研究了船舶典型轨迹模型动态更新方法由于内河通航条件的变化(如枯水期、丰水期、天气变化等),船舶正常轨迹也会随之改变,为了使船舶典型轨迹模型能够适应正常轨迹的动态变化,同时针对AIS数据流特性,设计了面向船舶轨迹的在线数据流聚类算法。本文将在线聚类过程分为局部轨迹点微簇增量更新以及全局轨迹点微簇更新两阶段,并利用全局轨迹点微簇动态更新船舶典型轨迹模型,从而使得船舶典型轨迹模型能够适应船舶正常轨迹的变化,进而降低误警率。最后通过实验验证了船舶典型轨迹模型动态更新方法的有效性。
其他文献
随着农村养殖行业的发展,人们虽然获得了很大的经济效益,但对农村环境产生了严重的污染。基于此,以四川省夹江县的养殖业为例,分析了农村养殖存在的污染情况,并针对污染产生
为获得合理的采场结构参数,实现某矿分段空场采矿法的安全高效开采,结合矿山实际,通过选择顶柱的厚度、矿房的跨度和矿柱的宽度作为变量,设计了四套优化方案。采用熵权-理想
针对广西国有派阳山林场森林防火体系建设现状、火灾发生情况和森林防火面临的形势,提出了林场森林防火体系建设的思路和重点建设内容,为维护林场森林资源安全提供保障。
本文扼要地阐明什么是普通话的变调,指明当前由于在实际应用上没有统一,使人们在变调上无所适从。文中提出变调需要统一,它是推广普通话,为后人造福的一项必要工程。
以色列的油气资源开发历经了半个世纪的漫长过程,其间伴随着中东地区政治、经济的互动与博弈。目前,该国的常规油气工业已显现出巨大的发展潜力,非常规油气也进入起步阶段,但
在新时代中国与世界的关系中,中国已经不仅仅是对外开放融入世界体系的受益者,中国还将成为世界和平的守护者、世界发展的推动者和全球治理的改革者。哈佛大学教授本杰明&#18
现代都市,工作压力大,生活节奏不断加快,缓解压力成为了我们的终极目标。在这样的一个大环境下,娱乐节目也在跟随着社会的脚步不断地进行创新,以博得大众眼球,提高收视率。其中,除了
报纸
既要坚决打赢疫情防控阻击战,又要确保按时高质量打赢脱贫攻坚战,全面完成今年经济社会发展目标任务,这是一道摆在全省干部群众面前的“两难”考题.rn破解这道题,习近平总书
报纸
一、我国国库支付制度效率评价的分析框架通常制度的效率有两种基本的评价方法:一种是,在制度实现的功能为既定的情况下,交易费用较低的制度是更有效率的;另一种是,交易费用为既定
校本教研是新课程大力提倡的教研方式,也是教师专业成长最有效的教研方式之一。文章从区域角度分析了初中信息技术校本教研存在的困惑,提出并实践了一种新型的"校际联盟教研"。