【摘 要】
:
随着定位技术的广泛应用,海量的移动对象生成了海量的移动轨迹数据。这些轨迹数据中蕴含着丰富的知识与规律,亟待得以高效地利用。轨迹大数据不仅具有大数据的特征,还具有轨迹数据独有的特点,如时空序列性,时空分布不均匀等。轨迹大数据查询系统的构建具有诸多难点,如大数据技术框架下轨迹大数据噪声点的清洗、轨迹大数据的索引与查询等。为了准确高效地查询到满足查询条件的轨迹数据,本文借助Hadoop平台具有的处理、存
论文部分内容阅读
随着定位技术的广泛应用,海量的移动对象生成了海量的移动轨迹数据。这些轨迹数据中蕴含着丰富的知识与规律,亟待得以高效地利用。轨迹大数据不仅具有大数据的特征,还具有轨迹数据独有的特点,如时空序列性,时空分布不均匀等。轨迹大数据查询系统的构建具有诸多难点,如大数据技术框架下轨迹大数据噪声点的清洗、轨迹大数据的索引与查询等。为了准确高效地查询到满足查询条件的轨迹数据,本文借助Hadoop平台具有的处理、存储大数据的能力,设计并实现了一个基于HBase的轨迹大数据查询系统,并基于实验室积累的海量真实轨迹数据进行了实验验证。轨迹大数据查询系统是轨迹大数据应用的基础与支撑,本文以构建轨迹大数据查询系统为出发点,重点研究了系统构建过程中几个重要模块,包括轨迹清洗、轨迹索引和轨迹查询。具体工作围绕以下三个方面开展:(1)结合原始轨迹数据存在的典型数据质量问题,提出了一种轨迹数据清洗流程。在该清洗流程中,根据原始轨迹数据异常种类的不同,将其分为两类分别进行处理,第一类是根据导入数据的时空边界对轨迹数据进行筛选,将不在时空采集区间上的轨迹数据过滤。第二类则是针对轨迹中出现的漂移点问题,通过设置速度与加速度阈值的方法,由满足阈值条件的最长的子轨迹先作为基准轨迹,通过向两端拓展的方式,完成对轨迹数据的二次筛选。(2)针对轨迹大数据面向对象-时间范围查询与面向时间-空间范围查询两类查询,分别设计了相应的索引结构与存储模型,并对分布架构下的查询方法做出优化。特别是针对时间-空间范围查询的查询需求,创新性提出了一种基于历史数据预分区的索引方法,通过构建辅助二级索引结构,对轨迹大数据的存储进行了优化,从而提升查询的效率,并基于该索引结构提出了空间冗余与空间切割的两种查询方法。通过实验的验证,本文提出的索引及查询方法,可以有效提升具有不均匀分布特征的轨迹大数据的时空查询性能,在保证查询结果准确性的同时,最大限度地减少生成子查询的数量。(3)设计并实现了轨迹大数据查询系统。系统基于Spring Boot开发,利用了Hadoop生态中的Map Reduce、HBase和Flume等组件,实现了轨迹数据从清洗、索引到查询可视化的全生命周期管理,可为后续的分析与挖掘提供保证。系统在应用于疫情防控的查询需求时,针对导入的海量轨迹数据,对象-时间范围查询与时间-空间范围两类查询都可以得到良好的查询时间响应。
其他文献
应用题一直是小学数学教学的重难点,其具体考查了学生运用数学思维整合信息以及解决问题的能力,不仅涉及具体数学知识的运用,还涵盖了解题思维的开发和锻炼。通过解答应用题可以巩固基础知识,培养分析能力和解决问题的能力,让学生了解数学的应用价值,提升数学实际应用能力。针对小学数学应用题教学的现状做出简单剖析,并提出几点教学方法以供参考。
近年来我国高等教育迅猛发展,伴随国家深入会计体制改革,管理会计理念逐渐在高校会计核算和管理中受到青睐。伴随人工智能、大数据、云计算等信息技术的发展,使管理会计理念引入高校机遇与挑战并存。本文通过阐述人工智能、大数据、云计算背景下高校财务会计向管理会计转型的必要性,分析高校管理会计转型存在的阻碍及问题,提出智能财务时代高校管理会计转型的对策建议,为提高高校治理能力,提升管理效率,真正实现现代化发展提
目的 观察黄芪葛根胶囊对2型糖尿病患者辅助降血糖作用的有效性和安全性。方法 110例2型糖尿病患者,根据受试者的血糖水平随机分为试食组和对照组。试食组服用黄芪葛根胶囊60 d,对照组服用安慰剂。观察血糖变化及症状改善情况。结果 试食组试食前后空腹血糖值为(8.02±0.97) mmol/L和(7.11±0.78) mmol/L,对照组试食前后空腹血糖值为(7.94±0.94) mmol/L和(7.
重介分选作为应用最广泛的选煤工艺,正在从自动化、信息化向智能化方向迈进。目前重介选煤厂智能化建设只是实现局部智能化,在整体智能化建设上还存在欠缺,在核心生产设备(重介质旋流器、浅槽等)智能化上发展不足。针对上述问题,从智能感知、智能控制与智能优化决策3个方面阐述了重介分选智能化研究现状,并剖析了重介分选在从自动化向智能化发展的过程中面临着诸多挑战性难题,包括原煤品质波动导致工况难以稳定运行、重介分
随着水利信息化建设,水利工程管理单位产生海量工程管理数字化业务数据档案。概述了数字档案室概念、特点和功能,列举了水管单位数字档案室应用场景,讨论了数字档案室在水利工程现代化管理中的应用。
CLIL教学将学科内容与相结语言学习相结合,创设语言学习的情境,引导学生把英语作为一个工具来使用,在学习他们喜欢的学科知识时提高学生的学习兴趣和动机,降低学习语言的焦虑,在提升他们的学科知识与能力的过程中,习得语言,达到语言学习的最终目的。
<正>3.1管道燃气用户事故原因分析二季度23起管道燃气用户事故中已经核实明确了事故原因的有15起,另外8起事故原因待核实。特点如下:一是由于燃气软管脱落造成事故2起;二是户内管道泄漏2起、私改燃气管道导致泄漏2起、干烧引发火灾事故2起。由此可见,消除户内燃气安全隐患、提高燃气设施的安全性能、推广使用防干烧燃气灶具及本质安全产品,是实现客户端安全的重要途径。
目前我国的货币政策正处于从数量型向价格型过渡的转型期,央行采用两种货币政策相结合的方式对经济进行调控,从总量和结构两方面保持货币政策稳健和中性适度。银行作为执行货币政策、连接实体经济的重要部门,是货币政策传导链条中不可或缺的一环,各项业务的开展保证了货币政策的高效传导。但近年来非银金融科技机构飞速发展,衍生出的多样化理财产品和借贷渠道对传统金融形成了有效替代,挤出了银行表内业务,缩小了货币政策的可
以某桥梁工程为例,对预应力混凝土桥梁设计进行分析,首先给出了桥梁设计要点,包括桥梁下部构造设计、上部构造设计、施工工艺设计、桥梁安装设计等,然后对设计中可能遇到的结构振动、桥梁上拱、桥面防水等问题进行研究,最后提出设计中的注意事项,以期进一步保障该桥的设计质量,提升其使用性能。
随着社会环境的变化和多元价值的影响,新时代高校研究生的婚恋观有较大变化,男研究生和女研究生的婚恋观差异也进一步扩大,研究生婚恋难成为一种普遍现象。近年来,伴随中国人口老龄化、少子化的日益加重,国家人口政策发生巨大变化,接连放开二胎、三胎政策,但人口增幅有限。中国研究生教育规模逐年扩大,高校研究生作为国家人口政策的主要执行者之一,其婚恋观不仅直接影响个人婚姻家庭,也间接对国家生育政策的施行效果产生影