论文部分内容阅读
随着国民经济的飞速发展以及城镇化进程的持续提高,我国机动车数量呈指数型增长。汽车保有量急速增长,高速公路的利用率越来越高,与之而来的交通拥堵、交通事故以及高速公路逃费事件等日益频发,如何基于大数据技术对交通出行效率和安全性进行提升是一个极具应用价值的研究课题。交通大数据存在数据多源异构、类型复杂以及对实时性要求高等特点,传统的单中心型关系数据库技术处理方式已无法满足现阶段的难以满足应用需求,基于此,本课题基于Ambari技术研发智慧交通大数据监控平台,提高智慧交通监管能力和交通大数据资源利用率。首先,深入分析智慧交通中大数据应用现状及所面临的主要问题,梳理了拟建设平台的功能构成;然后,针对交通大数据结构复杂、数据量大且实时性要求高等特点,结合交通大数据采集、清洗、分类、存储和加工等应用场景需求,设计了智慧交通大数据监控平台的总体架构和数据库模型;接下来,基于Ambari技术实现了智慧交通大数据智能监控系统,对交通大数据进行高效汇聚和智能分析,通过大数据可视化的管理、监控界面展示大数据平台的运行状况,有效提升智慧交通监控水平和对异常交通行为的识别能力;最后,结合实际应用场景对系统功能进行功能测试和性能测试,对平台功能进行验证和反馈优化。平台设计吸收了当前主流的大数据平台建设的先进思想,基于成熟开源底层框架,服务组件进行上层封装,以最小的改动适应底层框架的升级和更新,从而保证整体框架的稳定性和高可用性。运用了数据融合、云计算、云存储、等技术,并结合交通领域的数据特点,对开源组件进行二次开发,自主开发增加系统对交通领域独有特性的最大支持,以最大程度适合交通大数据采集、监控、分析需求,无论是系统功能性、健壮性、稳定性均能得到有效的提升。结合Ambari Metrics System进行指标采集、存储和应用,为系统管理员提供集群的创建、管理、监控及升级等多项便捷的服务功能,同时还能提供各类服务及主机的相关指标,从而达到判断集群健康情况的目的。从总体上看,本课题研发的交通大数据智能监控系统应用情况良好,目前已经在华北几家智慧交通应用企业进行试点,对交通大数据智能监控水平以及大数据驱动的智慧交通更高层次应用奠定了良好的基础。