基于Spark和小波分析的水上交通异常数据实时检测方法研究

来源 :陕西理工大学学报(自然科学版) | 被引量 : 0次 | 上传用户:xielianqin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对不断增加的水路运输产生的水上交通数据量增长,导致的水上交通监测难度更大、处理时间更长,提出一种基于Spark的交通异常数据实时检测方法,通过对船舶自动识别系统(AIS)数据进行处理,对不同类型的交通数据进行分析并写入分布式文件系统HDFS中。然后通过小波分析的方法对AIS数据进行多层分解,去除高频噪声并对数据进行重构,找出AIS数据中的异常信息。通过对异常信息进行分析,结合Spark的数据处理结果,最终实时检测出交通异常数据。实验结果表明能够在短时间内对异常数据进行检测和分析,处理速度快,异常数据检测
其他文献
根据289个单季稻氮磷钾肥效试验结果,应用肥料效应函数法研究氮磷钾推荐施肥量,即:(1)不同土壤肥力等级或目标产量的氮磷钾推荐施肥量和比例;(2)土壤碱解氮、Olsen-P和速效钾测定
大别山区石英质玉属新近发现的一种石英质玉(简称"大别山玉"),具色彩绚丽、质地细腻温润等特点。利用偏光显微镜、扫描电子显微镜、X射线粉末衍射、化学分析、红外光谱分析等
小学阶段,学校心理康健教育的形式就是开设心理健康教育校本课程。同时,新课程的实施要求农村小学开展心理健康教育校本课程。由于农村不同地区差异较大,教育文化发展不平衡,
融资约束是民营企业对外直接投资(OFDI)所面临的首要难题,借助中国民营企业"走出去"与竞争力调查问卷数据,实证检验融资约束对民营企业对外直接投资的影响。分析发现,第一,融
基于电子商务环境之下的农产品物流有着极大的发展空间和前景,农产品电子商务化的需求飞速增长。然而生鲜类产品电子商务化与其他产品电子商务化相差甚大,包括顾客对生鲜产品
盐胁迫是造成作物减产的主要非生物胁迫之一。植物抵抗盐胁迫是一个复杂的过程。综述了近年来植物耐盐分子机理领域的进展,对渗透调节物质、离子平衡、解毒作用等与植物耐盐
<正>一、研究的意义和目的在学前教育领域,学习品质已成为幼儿教师和家长所关注的一个热点,也日益受到国内外研究者的重视,成为制定早期儿童学习标准中不可或缺的一个方面。
第一次世界大战美国参战后,为开展战争宣传,引导舆论,动员公众支持战争,并压制一切对战事不利的信息传播,美国政府建立了公共信息委员会。作为政府的公共关系机构,其活动为赢
黄河是我国的第二大河,是中华民族的母亲河,黄河流域是华夏文化发祥地,曾经长期是我国政治、经济、文化的中心地区。黄河是世界上最著名的多泥沙河流,中游地区严重的沿途侵蚀
产业集群模式能够有效推动和整合区域内的经济和社会资源,可以增强县域经济的实力和综合竞争力。当前陕南秦巴山区产业集群虽然驱动了县域经济的发展,但是也存在相应的困境与瓶