基于日志的网络故障检测算法研究

来源 :中国科学技术大学 | 被引量 : 0次 | 上传用户:foxmaj
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着科技的不断发展,人们对通信网络的要求越来越高,而故障管理是网络管理中的重要组成部分,实现故障管理的第一步是发现网络中存在的故障。传统的网络故障检测方法严重依赖于已有的告警数据。但是利用告警数据只能在已有的知识范围内对已经掌握的故障进行分析,并且需要预先人工构造知识库。与此同时,常常被忽略的是,网络无时无刻不在生成大量的日志数据,这些日志数据蕴含了大量的信息,通常,这些日志没有被很好的利用。本文围绕网络生成的日志展开研究,利用日志来分析网络故障与否。使用日志来检测网络故障,重点分为两个部分.:日志的表示和故障检测算法。由于日志的非结构特性,需要进行日志向量化表示,表示策略将会影响后续故障检测和故障提取等分析的性能。本文针对日志的表示和网络故障检测算法进行了分析与探究,设计了一套完整的从日志样本表达到网络故障检测的算法。主要工作如下:第一,提出了一种新的方法来实现对网络当前所处状态的分析。在现有告警等结构数据的基础上,引入非结构的日志数据,将网络生成的日志当作类自然语言的文本,使用日志来判断网络故障与否。提出了一种基于仿真数据构造网络状态检测样本的方法,通过处理仿真数据从而不需要对网络系统的大量先验和专家知识,适用度广,也提高了数据的利用率。第二,针对日志的特征表示这一问题,提出了对日志的单词级别、事件级别和事件集级别的多粒度表示方式,并提出了针对日志文本的主题词移距离。这些表示方法对于日志不要求固定格式输入和人工特征工程,克服了现有日志处理的困难。在表示的基础上,为分析日志文本间的距离,提出了主题词移距离,在原有的词移距离的基础上引入主题信息,使得词与词之间的距离描述更加精确,为使用日志分析网络状态创造了条件。第三,在日志表示的基础上基于卷积神经网络设计了一种故障自适应检测算法,在检测已知故障的同时,同时能够结合自适应原理发现未知的故障。在自学习检测时,通过对现有样本的输出信息进行统计求得故障知识库,通过这个知识分析每种故障的置信度,进而判断故障是否是已知。而对未识别知识库进行知识提取又能扩充已知的故障知识库,从而实现在检测时同时实现未知异常自学习。训练过程可离线提前进行但运行可在线进行,且在运行时实时更新知识库,从而在应用时能快速处理日志,实现故障的自适应检测。基于仿真数据和增强数据的实验表明,本文提出的故障自适应检测算法对已知故障和未知故障都能保持较高的检出效果。
其他文献
以我国高科技企业的中层管理人员为对象,在国内外相关研究的基础上探讨周边绩效模型,结果表明周边绩效可以区分为5个维度。周边绩效是高科技企业中层管理人员绩效的一个重要
印光法师被誉为莲宗第十三代宗主,是近现代净土信仰振兴和发展的代表人物。本文主要从印光法师所著的《印光法师文钞三编、续编、增广》等文献中,探索和分析印光法师关于儒佛
介绍了将电子束焊接技术引入承压设备制造的应用实例。
目的 探讨太极拳训练对改善帕金森病(PD)患者步行能力及害怕跌倒的作用。方法 选择80例早期PD经随机数字表法分为干预组(n=40)和对照组(n=40)。对照组接受神经内科常规治疗和护理,
作为合伙企业和股份公司的一种中间状态,有限责任公司兼具有资合性和人合性两大特征,为维护有限公司的人合性,股东优先购买权制度营运而生,股东优先购买权作为特殊的法定权利,其行
目的:特种坐姿人员多裂肌超声形态改变量化评估。材料与方法:采用随机平行对照的方法进行本研究。2013年12月先后对某单位所有从事特种坐姿的59名工作人员及沈阳市某高校全体51
近年来,族群认同的情境化与文化阶序问题受到越来越多的讨论。受王明珂所提出的情境与文本、“社会本相”与“表征”之间互映、互生这一观点的启发,笔者选取中国西南的人类学
新刑诉法第73条规定了对涉嫌危害国家安全犯罪、恐怖活动犯罪、特别重大贿赂犯罪等三类犯罪指定居所监视居住制度。该制度在适用条件、内容及执行等方面均与监视居住强制措施
本文立足农村,以基督教在农村的传播和发展为切入点,研究转型期农村社会民众的思想文化渴望和精神世界诉求。本文选取了皖北小村吴宅村做为研究样本,通过查阅文献、分发问卷、入
加布里埃尔·福列(Gabriel Faure,1845-1924),是一位浪漫主义时期初期的法国作曲家。他对于法国的民族音乐造成了巨大的影响。对于19世纪的欧洲音乐也有着深刻的启迪。福列的