基于GPU的分布式数据包采集与回溯分析系统设计及实现

来源 :山东科技大学 | 被引量 : 0次 | 上传用户:heyjoey
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着网络信息技术的迅猛发展和普及,网络应用及流量呈现出前所未有的增长趋势。因此,对于海量异构数据的分析挖掘工作也变得异常困难。网络数据包作为网络大数据分析与挖掘的基础,通过对其分析能够对当前的网络态势进行精准预判。本文设计并实现了分布式数据包采集与回溯分析系统。该系统可以实现对网络数据包的采集、存储、分析功能。分布式数据包采集与回溯分析系统既能为网络优化提供真实的网络历史状态数据,又可以为评估网络状态、预测未来的发展趋势提供依据。本文详细介绍了分布式数据包采集与回溯分析系统的设计与模块开发工作。首先,针对业务需求,结合网络数据包采集与分析的相关技术,对分布式数据包采集与回溯分析系统进行了功能性和非功能性需求分析;其次,根据需求分析的结果,设计并实现了系统整体的功能构架和技术构架,并阐述了各个子模块的设计与实现。最后,分布式数据包采集与回溯分析系统通过实际部署测试,验证了该系统在海量数据下的采集、存储与分析能力,以及在海量数据下系统的查询性能以及系统的稳定性和可扩展性。分布式数据包采集与回溯分析系统的核心模块主要包括数据包采集模块、GPU并行分析模块、回溯分析模块以及数据存储模块,其中采集模块使用Go语言基于Libpcap与BPF等技术实现,可对网络数据包进行过滤采集;同时系统运用GPU与HDFS文件系统等相关技术,实现了对数据包并行解析以及存储等功能,极大提高了分布式数据包采集与回溯分析系统的性能。
其他文献
介绍了鞍钢HQ590DB超低碳贝氏体钢成分优化、钢质净化及微合金化过程,阐明了其在鞍钢1780热轧机组的控轧控冷工艺制度,包括温度制度及压下制度,尤其轧后加速冷却制度的优化过
防错技术可以是一个装置,也可以是一个机械或是一种检查手段,其主要目标是防止操作错误或使错误能一目了然,不允许被错误操作的产品流到下一个工序,在发生错误的工序上消除造
模拟高炉内衬条件,利用实验室小型半干法喷补机进行喷补试验,测试了喷射压力、喷射距离、配水量和炉温等因素对喷补附着率及喷补层与残衬粘结强度的影响规律.利用模式识别和
通过金相观察、大样电解、电子探针和扫描电镜等手段 ,对南钢连铸小方坯中的夹杂物进行研究 ,找出了夹杂物数量、尺寸、组成、分布和类型在连铸不同工序中的变化规律 ,提出了