【摘 要】
:
异常检测问题是机器学习领域的一个经典问题,其旨在从给定数据中检测出偏离正常模式的样本。而时间序列异常检测,即针对时间序列数据的异常检测,无论在学术界还是工业界都具有重大的意义。时间序列异常检测可以自动地从大量互联网公司业务或工业机械等监控数据中自动地发现异常,从而避免损失。现有的时间序列异常检测算法主要有特征提取和端到端两种方式,不过这些算法存在严重的问题:(1)对于基于特征提取的异常检测,为了保
论文部分内容阅读
异常检测问题是机器学习领域的一个经典问题,其旨在从给定数据中检测出偏离正常模式的样本。而时间序列异常检测,即针对时间序列数据的异常检测,无论在学术界还是工业界都具有重大的意义。时间序列异常检测可以自动地从大量互联网公司业务或工业机械等监控数据中自动地发现异常,从而避免损失。现有的时间序列异常检测算法主要有特征提取和端到端两种方式,不过这些算法存在严重的问题:(1)对于基于特征提取的异常检测,为了保证算法的有效性,往往会提取大量的特征,这就造成了特征维度过高的问题;(2)对于端到端的异常检测,现有的算法忽略了数据集中存在的大量的缺失值问题,并且无法利用现实场景中存在的已有的异常标签;(3)对于端到端的异常检测,仅仅使用自编码器的重构误差对于局部异常效果并不好。同时由于神经网络强大的拟合能力,容易对异常样本也重构的很好。为了解决上述问题,本文针对无监督时间序列异常检测展开了研究工作。首先,本文提出了一种基于知识蒸馏的异常检测框架以缓解特征提取维度过高问题。模型框架由一个教师网络和若干个学生网络组成。首先使用自监督目标函数对教师网络进行预训练,之后训练学生网络来接近教师网络的输出(即使用教师网络学到的知识来“教”学生)。由于学生网络并未在异常样本上进行过训练,所以对于异常样本来说,教师和学生的输出以及不同学生之间的输出会存在很大的差异。于是可以根据这两个角度来进行异常的判别。其次,基于对抗自编码器构建模型,本文提出了对比重构损失和训练填充机制来分别解决利用少量先验标签和缺失值的问题。对比重构损失相比原始的重构损失可以减少对异常样本的正确重构。而训练填充机制会利用对抗生成网络强大的生成能力来在训练过程中不断的补充缺失值。最后,本文使用了额外的预测模块和记忆模块来解决重构任务在检测局部异常上的不足和容易过拟合的问题。新增的预测模块使用一个额外的预测任务,通过使用已有的观测值来预测下一个时间步的值,从而实现对局部异常更好的检测效果。除此之外,记忆模块通过显示地建模正常模式,确保解码器仅仅通过记忆模块中的向量进行重构,使得对异常样本进行良好重构的概率大大降低。为了验证模型的有效性,通过进行了广泛的实验,实验结果表明了本文提出的方法在时间序列异常检测上的有效性。
其他文献
欧洲人瓜分非洲的活动没有顾及非洲当地的实际情况,也没有考虑非洲人的权益诉求,由此造成的边界、族群、资源分配等方面的问题一直延续,为非洲的发展带来了不少的麻烦从奴隶贸易到"合法贸易",持续的经济交流使非洲与欧洲的关系不断强化。从内陆探险到传教,欧洲人对非洲人与自然的认知不断完善。经过了数百年的渗透后,在19世纪末20世纪初的约30年时间里,欧洲相关国家对非洲进行了瓜分。瓜分非洲的动机瓜分非洲的
在习近平法治思想的指导下,随着《法治中国建设规划(2020—2025年)出台》,我国地方法治建设规划起草工作正如火如荼地开展。习近平法治思想为地方法治建设开辟了新的境界,更好地发挥了地方法治建设规划的蓝图作用。但在部分省市法治建设规划的起草过程中,尚有起草部门协同能力建设有待提升、科层制降低起草效率、内容求全责备以及与地方发展情况脱节等问题。为了提升地方法治规划起草工作水平,起草部门应当加强协同机
西方著名教育家托马斯?阿奎纳曾经指出"教学是教师试图借以尽快摆脱学生的一个过程"。我国语文教育家叶圣陶先生也说过"教是为了达到不需要教"。无论是"尽快摆脱学生"还是"达到不需要教",究其根本,都阐明了教学活动的终极目的——高效有序地培养学生的基本能力,全面稳固地提高学生的综合素质。现行教材中的自读课文,正是培养学生自读意识、提高自悟能力的一个很好的手段。在自读教学中,要注意哪些问题呢?先来谈
在阿里云对象存储Object Storage Servic(OSS)服务器运营维护工作中,人工运维、规则化异常检测依然占据主流,异常检测场景的多样性促使代码开发管理任务繁重,服务器集群的动态变化和调整、区域阈值设定及人工调参的运维方法使得运维任务繁重,运维人员分身乏力,所以需要一种更智能化的异常检测系统伴随服务器集群的动态发展,以保障业务稳定,提高运维效率。本文使用时序数据挖掘技术构建了XGBOO
随着互联网技术和制造业技术高速发展,以及工业互联网、智能制造等理念的提出,实现车间设备网络化和数字化已成为重点关注方向。并且刀具在切削过程中,很难直接检测到刀具切削状态,而刀具切削出现异常,不仅会降低刀具寿命,增加加工件残次品产出数量,甚至可能会造成数控设备出现故障。基于此,本文搭建了基于MTConnect协议的数控设备数据可视化客户端,同时提出了基于主轴负载的数控设备刀具切削异常检测方法,主要研
目前,车辆轻量化设计已成为各汽车生产企业在产品开发中的重要环节。相比较乘用车,商用货车由于整备质量、结构刚度和强度性能普遍较高,因此轻量化空间更大。货箱作为整车上的最大零部件,其重量占整车重量的15%。30%,货厢轻量化技术的研究和应用对货车轻量化具有重要意义。本文基于某轻卡车型现有设计,利用多学科优化平台Optimus,对货箱瓦楞板进行优化设计,优化后可减重45kg,减重幅度达到15%以上,而一