论文部分内容阅读
随着社会的信息化发展,很多部门也逐步建立各自的业务信息系统,但由于部门间共享理念和共享技术方面的原因,导致位于不同地理位置的各部门虽然都各自拥有足够充分的数据,但这些“海量”数据仍然没有被有效共享而充分利用起来。而且即使在同一部门中,由于各业务系统建立时间和提供商不同,各系统的数据来源、存储方式和记录格式也各不相同,因此各数据的“多源”、“异构”性也为系统间的数据共享带来不便。同时,随着社会高速发展,许多企业部门对数据的“实时性”需求也越来越高,因为数据实时性越高,便意味着各企业部门高层能根据该实时数据做出更及时、更准确的决策。针对以上问题,本论文提出了一种“多源异构数据实时处理模型”。该模型基于各目标数据源类型制定实时监测方案以监测各数据源数据文件更新,并制定相应的“并行处理策略”,对获取到的“海量”实时数据文件实时审核和处理,并将该模型应用于“多源、异构”气象数据处理中,基于SuperMap组件将以文本或二进制记录的“异构”气象数据文件转换为具有统一格式的空间GIS数据,最终实时保存到数据库中,完成了“多源、异构”气象数据的GIS可视化,同时也实现了各部门系统间的“多源、异构”数据实时共享。因此本文的主要工作和创新点如下:(1)针对目前数据文件的“多源、异构”等特点,再结合各部门对数据的“实时性”的需求,设计了“多源异构数据实时处理模型”;(2)将“多源异构数据实时处理模型”成功地应用在气象数据处理上实现了气象部门各系统间“多源、异构”气象数据的实时共享;(3)系统基于GIS组件——SuperMap,完成了将文本或者二进制记录的“异构”气象数据文件向具有统一格式的空间GIS数据的转换,同时实现了各类气象数据的GIS可视化;目前本系统在上海市嘉定区气象局得到成功应用,为嘉定区气象局的日常业务提供很大的帮助,同时本系统的实现也对其他类型数据的实时共享具有一定的借鉴价值。