基于关系型数据库的网络流数据预处理与物联网设备识别系统研究

来源 :天津师范大学 | 被引量 : 2次 | 上传用户:tbtbtb5518232
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
网络设备分类在网络管理和网络空间安全方面有着广泛应用,设备分类的前提要对流量数据进行正确的预处理。现有预处理方法大多利用编程语言开发出小型工具类软件,应用范围较窄不具有推广性,无法满足一些特定的处理需求且源码不公开。利用网络流统计特征来进行网络设备分类和安全管控的应用研究,往往受限于该领域数据集的不充足,一些优秀的数据集也并未完全公开数据的具体采集和处理过程,如网络入侵检测数据集KDD CUP 99等。因此,在实际工程应用中,迫切需要一种灵活高效的处理方法和手段,来构建出符合自身需求的流量统计特征数据集。本文所提出的基于关系型数据库的网络流数据预处理方法可以有效完成流量统计特征的提取,相比已有的技术手段具有提取快速﹑自动化程度高﹑通用性强的特点,使用该方法可以灵活构建出不同分类需求场景下的流量统计特征,极大提升了原始网络流数据的预处理效率。本文的主要工作如下:(1)提出了一种通用性的网络流量数据集构造方法,该方法基于关系型数据库的SQL脚本语言来实现,具有批量处理﹑编码灵活﹑特征自定义程度高的优点。将常用流量统计特征进行了抽象概括,利用SQL统计语言以模块化的对应方式映射出与统计特征相符合的代码模块,并进一步形成了特征提取库,对于网络流量包的统计特征预处理过程具有通用性的处理能力。(2)统计特征提取实验选择在公开的pcap数据集上进行,对于需求选定的统计特征集合进行提取算法的程序实现。实验结果表明,利用本文所提预处理方法完整准确的提取出了指定的流量统计特征,完成了从pcap二进制格式流量文件至机器学习模型所需的CSV格式统计特征文件的处理转化。(3)为验证本方法所提取出统计特征数据的正确性和有效性,将生成的CSV统计特征数据输入到多个经典的机器学习模型进行物联网设备的分类预测。实验结果表明,本文方法所生成的数据集对于训练效果的准确度不低于已有的同类研究文献,由于所对比的模型均是经典模型且多数采用默认超参数,说明在相同的模型结构下使用本文方法生成的训练数据集能使模型具有更好的分类效果。(4)基于本文所提出的网络流量统计特征提取方法设计并实现了一种物联网设备识别系统架构。客户端使用Wireshark作为流量数据采集服务,利用Mysql的存储过程实现原始流量数据的定期统计转储,结合Windows系统下的bat批处理命令实现了自动化的原始流量数据获取至待预测统计特征数据的生成。利用Postman工具模拟了http的客户端访问请求至预测结果返回的设备识别过程。
其他文献
英国著名侦探小说家、剧作家阿加莎·克里斯蒂(1890-1976)是侦探小说黄金时代的代表人物之一。学术界对克里斯蒂的研究的重点关注其侦探小说的创作技巧,而对其作品中人物性格
准确快速地检测出环境水体中氰化物的含量具有非常重要的意义。采用氯胺T将氰化物衍生成氯化氰,用顶空气相色谱技术测定,并对色谱柱的选择及其分析条件和衍生化试剂的用量进
以抗血小板释放5HT作用(14C5HT释放法)和阻滞血管内皮细胞钙通道(45Ca掺入法)为指标,比较了ig6种给药方案所取含药血清的药理作用强度,探讨不同给药方案对中药血清药理学方法的影响。
易班是大学生实名综合性网络互动社区,是新媒体时代开展大学生网络思想政治教育的重要载体。面对易班发展中的机遇与挑战,加强医学院校易班平台推广建设,需要从大学生心理认同的
用直接剪切的方法制备了SBS、废旧橡胶粉以及纳米SiO2三元复合改性沥青,研究了拌合时间、拌合温度及改性剂掺量对沥青形貌以及沥青软化点、针入度、延度的影响规律.研究结果
结合近年来的典型LNG罐车事故案例,提出LNG罐车交通事故救援处置原则,如加强初期管控、进行灾情评估、交通管制和任务分组等.在此基础上,根据具体事故发生情况提出处置措施及
目的探究心理护理联合运动疗法对妊娠期糖尿病(GDM)患者的的效果以及对心理状态及妊娠结局的影响。方法选取2015年7月~2016年7月收治的120例GDM患者临床资料进行分析,按照不
短串联重复序列(short tandem repeat,STR)是目前亲子鉴定中使用最广泛的遗传标记.由于突变的因素,存在事实亲子关系的样本有时会表现出1-2个STR基因座不符合遗传规律,给检验
社区公共服务工作的进展直接关系到社区居民的日常生活稳定,关系到整个社区机体的健康成长。本文通过对我国社区公共服务问题的提出以及发展现状的介绍,以引入实际案例的分析
菏泽传统手工艺编织产品在我国民间,蕴含着悠久且丰富的历史文化,是中华民族极为少见的艺术瑰宝,拥有着极其悠长的历史、十分精湛的技艺、超级丰富的种类、持续不断的佳作。