基于改进RNN及密度聚类的异常流量检测方法

来源 :北京邮电大学 | 被引量 : 10次 | 上传用户:sunshinexpsister
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近些年来,互联网的规模急速增长,数据规模迅速扩大,网络的管理与监测成为越来越重要的任务。对网络流量异常值进行检测,可以为网络管理、安全预警等多种事务提供关键的决策帮助,具有十分重要的意义。目前,关于异常流量检测的研究已经有了较大发展,但还存在着一些局限性。例如,传统统计模型无法适应网络流量自相似性、长相关性等特性;基于分类训练的方法需要大量的标注数据用作训练不太符合实际;基于聚类的检测方法又对聚类结果依赖较大。此外,目前大部分的检测研究更多地集中在异常检测的准确度而较少考虑时间效率,难以快速应对网络中的异常。为了提高流量异常检测的准确性和时间效率,本文提出了一种基于流量预测-密度聚类的综合异常检测方法。首先提出一种基于改进RNN结构的流量预测方法,得到较为准确的流量预测值,随后利用预测结果作为聚类检测的输入之一,以缓解基于聚类的异常检测中面对一维流量值聚类时存在的检测性能较差问题,随后提出基于改进密度聚类的异常检测方法对流量数据进行异常检测。具体来说,针对大多数基于循环神经网络(Recurrent Neural Networks,RNN)的流量预测方法存在的长期依赖问题,进而导致的预测准确度低,以及时间效率较低的问题,本文提出一种基于改进循环神经网络的网络流量预测方法,使得预测模型训练速度提高并具有良好的预测准确度。该方法首先基于时钟循环神经网络(Clockwork RNN,CW-RNN)的基础结构,引入随机权重的思想,并将隐层模块替换为回声状态储备池,简化神经网络结构,提高模型的训练速度。随后进一步对隐层激活规则进行修改,每个储备池在每步训练中均由对应时钟前的记录信息进行激活,使得每次的输出都可以综合所有隐层模块的信息,提高神经网络模型的预测精度。通过仿真实验证明,该方法能提供准确的预测结果,并具有较快的训练速度,是一种时间效率和准确度综合更优的预测方法。然后,针对传统基于密度聚类的异常检测方法对样本的局部特性考虑不足,异常检测准确度不高的问题,本文提出一种改进密度聚类的流量异常检测方法。首先在数据特征选取上,针对一维时序流量值聚类时异常检测效果较差的问题,将基于改进CW-RNN的流量预测结果作为聚类输入样本的一个维度,以增加样本包含的流量时序信息特征,提高异常检测的准确性。随后,在密度峰值聚类算法(Density Peak Clustering,DPC)的基础上引入引力理论,提出势能的新概念替代原有的密度,并引入K近邻的计算方法来缓解原算法中对截断距离过于依赖的问题。最后,为了充分考虑样本的局部特征以提高预测精度,提出势能梯度的概念用于进一步异常值的检测。仿真实验结果表明,该改进方法可有效提高流量异常检测的准确度。
其他文献
近年来,我国中东部连续大面积霾污染事件频发,严重影响空气质量、大气水平能见度和公众身体健康,社会各界对解决霾污染的呼声日益增高,成为各级政府迫在眉睫需应对的问题。本文从
目的:考察大学生归因方式、自我效能感与主观幸福感的关系。方法:对269名大学生进行归因方式、自我效能感、主观幸福感问卷测量。结果:①归因方式对主观幸福感有预测作用,其
1病历资料患者,女,23岁,主因'乏力1月'入住我院。入院诊断:双肺继发性肺结核涂(待查)初治。入院情况:体温36.2℃,脉搏114次/分,呼吸21次/分,血压100/68mmHg,神志清楚
针对现有实践教学体系中多学科型创新实验缺乏的问题,立足于与人类生活息息相关的生活用水的水质监测,提出了基于Arduino的可见光浊度检测仪的创新实验方案。实验融合了分析
根据我国工业建筑的现状,探讨工业建筑改革的核心;结合实际工程,总结出现代工业建筑的发展新趋势。
目的:探讨饮食调理和情志护理在慢性胃炎患者中的应用效果。方法:选取2016年6月~2017年1月在我院诊治的78例慢性胃炎患者为研究对象,将其根据随机数字表法等分为对照组和观察组
四川盆地川中地区须家河组储层主要为一套辫状河三角洲相砂岩,储集岩主要为长石石英砂岩、长石岩屑砂岩和岩屑长石砂岩。以岩心观察为基础,结合薄片鉴定、扫描电镜和物性等资料
<正>2019年1月26日,德国煤炭委员会宣布了淘汰煤电的时间计划表,确定了德国最晚将在2038年底之前彻底结束煤电时代。大众汽车公司也在近日高调宣布正在研发最后一代内燃机汽
我公司在焊接不锈钢管道时,主要的手段为手工焊接,而我厂的管道预制生产的特点就是焊接位置单一、集中,2010年我厂承接了台山核电不锈钢管道的工厂化预制合同,经公司领导讨论
介绍了UPVC管材扩管模具的设计、结构、计算方法和注意事项。