基于异构体系结构的时序数据库实时查询性能优化

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:LCW8889
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网技术的高速发展以及物联网的兴起壮大,庞大的互联网服务监控业务、工业物联网传感器以及移动终端等产生了海量的时序数据,这些数据的规模往往超过百亿。在对于这些数据管理的上,目前的模式在性能上渐渐开始展现出不足。为了能有效的存储数据,一些系统借助磁盘来组织数据,这使得可以有足够的空间构建高效的索引,但是磁盘的I/O限制了系统读取性能。另外一些设计了基于新型体系结构结的方案,可以通过诸如SSD,内存这样的高性能硬件设备提高系统性能。然而索引的检索效率以及海量的数据解压最终也限制了查询的效率。为了解决这些不足之处,设计并实现PCQO(Parallel Computing for Time Series Query Optimization with GPU),一种基于GPU(Graphics Processing Unit)的并行计算查询加速方案。PCQO的优化方案是通过GPU并行计算来加速在时序查询中执行的倒排索引的交集操作和数据解压操作,以达到降低查询延迟的效果。同时,根据对生产数据的分析发现,对于时序数据的实时查询请求仅涉及到最近几个小时内的数据,因此PCQO选择将近期的数据及其索引存储在GPU的显存当中,这种做法可以大大减少数据传输带来的时间开销,从而进一步降低查询延迟。实现结果表明PCQO在处理实时查询请求时,可以有效提高请求响应的实时性。PCQO对倒排索引检索的交集的提升在2倍以上,而在压缩数据的处理速度上有5-8倍以上的提升,而从整体上来看,查询性能提升约有1.6倍以上,并且数据量越大,提升效果越明显。
其他文献
随着城市水环境整治工作的开展以及城市内外河水位调节工程的建设,各类环湖、沿河水网控制工程大量涌现。而深基坑降排水是这类工程建设施工中重要的一环,降排水方案的设计、优选是一项重要的内容,本文就黄天荡闸堰工程的深基坑降排水方案设计、比选开展了以下工作:1、据基坑降水基础理论及工程概况,确定了基坑涌水量等数值;通过承压水抗突涌稳定性计算,分析了基坑开挖面处于的安全状态;通过简化Bishop法计算,分析了
近年来,在国家大力提倡的“创新创业”的政策利好环境下,涌现了海量的初创型企业,但很多初创公司都会在三年时间内销声匿迹。这些经历着九死一生的初创公司普遍都存在着资金储备有限、产品或服务竞争力不足、人才匮乏和营销乏力中的一个或多个问题。本文研究的对象为Q公司,属于营销驱动型的科技型公司,从事着比较前沿的元宇宙行业,当前处于生存都不太稳定的经营状态,面临着所有初创企业都存在的难题,亟待通过营销策略的制定
学位
学位
互联网订餐作为21世纪的新兴产业,具有方便快捷、品类齐全、时效性强等众多优势,近几年发展迅猛,未来几年有望成为万亿级别市场。参与互联网订餐的消费者人数众多,且增速明显,其中20~34岁的年轻消费者占主要部分,这也为互联网订餐的持续发展提供了巨大空间。但近年来频频曝出互联网订餐相关的食品安全问题,严重制约互联网订餐的有序发展,也给消费者的食品安全造成不良影响。互联网订餐不同于传统餐饮行业,其参与方众
国家宏观经济政策会对企业前景和预期产生重要影响,房地产信贷政策作为国家宏观经济政策的辅助,一直都是国家干预房地产市场的重要手段。房地产信贷政策能够通过影响微观主体行为进而落实国家对特定行业的发展规划。自1998年实行住房货币化改革以来,房地产一度被定义为推动我国经济发展的引擎。于1998年开始陆续实施的《个人住房贷款管理办法》等配套房地产信贷政策有效刺激了住房需求,推动房地产市场走向火爆。然而,房
整个人类社会的发展面临着两个严重的问题:化石能源的逐渐枯竭和生态危机的日益严重,大力发展清洁能源是解决这两类问题的关键。目前风电、光伏等新能源发电已经广泛应用,但此类清洁能源发电受限于外部环境,电能波动较大无法做到稳定可持续。而储能在新能源侧的应用能够一定程度上解决风、光能源波动,减少弃风、弃光,满足日益扩大的电网调节需求。因此,发电侧储能系统的使用将极大的提高新能源并网发电的规模和应用。储能变流
随着工业4.0时代的到来,制造业开始走入智能化、高端化、绿色化的发展道路。印制电路板(Printed circuit board,PCB)作为电子元器件的支撑体,其表面缺陷的自动化检测更是未来制造业发展的主要方向之一。目前,常用自动光学检测(Automated Optical Inspection,AOI)设备进行PCB表面缺陷的自动化检测。AOI设备效率高、可靠性强,但其价格昂贵,让很多企业望而
在中国当代文坛,她被誉为“西藏的马丽华”。她优美、独具魅力的文风,在文学、考古学、历史学、地理学等方面的广泛涉猎和知识积累,特别是纪实散文作品信笔由缰,娓娓道来,旁征博引,情怀深厚,极具个人特色,深得读者喜爱。她历任《西藏文学》编辑、西藏文联和西藏作协副主席、中国藏学出版社总编辑等职,且著述甚多,笔耕不辍,已出版深受读者喜爱的文学作品20余部,其中多部已被译为英、法等文种,多次获得文学奖项。如代表
在实施乡村振兴战略的背景下,政策要求把农业农村农民问题作为重中之重,目前,随着我国经济社会的不断发展,农村居民生活条件的不断改善,垃圾数量迅速增多,且垃圾种类也越来越多样化。怎样对农村生活垃圾进行有效治理,是乡村振兴战略的题中之义、是实现生态环境建设的一项必不可少的任务。通过资料查阅,结合对吉林省辽源市东丰县农村垃圾清运工作现状调研,采用数学建模法对农村生活垃圾回收网络进行分析,总结农村生活垃圾收