钱塘江流域水质时间序列数据清洗及预警研究

来源 :杭州电子科技大学 | 被引量 : 0次 | 上传用户:lajiub1987
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,为切实治理水环境安全问题和促进水环境质量的不断改善,全国各流域生态环境监测站点扎实开展水质加密监测,从而保障环保部门及时掌握水质动态情况以及进行水质预警决策分析,因此如何准确地对流域水质数据进行监测和预警已成为当下研究热点之一。然而由于大多数水质传感器通常会受日常维护、录入数据库错误和传感器测量误差等因素影响,因此采集的水质数据会出现两种类型的数据错误:噪声数据和缺失数据,而现有的数据清洗方法仅仅适用于简单且少量的错误数据清洗。因此本文以时间序列特性为切入点,分别从基于流域水质数据复杂多变的分布特点自适应去除噪声和基于迁移学习的大规模缺失水质数据填补两个方面侧重研究了水质数据清洗框架,并以钱塘江流域水质异常预警为决策分析案例开展了研究。主要工作和创新如下:首先,由于水质传感器易受到测量误差等环境因素影响,从而导致采集的数据中通常含有各种类型噪声,传统去除噪声算法的抗干扰性和鲁棒性表现较差。因此本文提出了一种基于经验小波变换和多尺度模糊熵的自适应去除噪声方法,其中经验小波变换可以自适应分解频谱数据,而多尺度模糊熵值可构造出自适应的阈值函数。实验对比结果表明该算法去除噪声效果均为最优。其次,针对于采集的水质数据通常出现数据缺失的问题,现有的填补方法仅适用于小规模且随机的数据缺失填补。因此本文以大规模连续的缺失数据为研究对象,提出了一种迁移学习和长短期记忆模型相结合的缺失数据填补方法。实验对比结果表明该算法的缺失数据填补准确率得到了较大的提高。最后,为了提高水质异常预警结果的准确性,本文提出了一种基于自回归移动平均和孤立森林动态的水质异常预警方法。该方法以自回归移动平均算法在线动态预测为基础,同时利用孤立森林算法检测超出阈值的异常预警数据。实验结果表明此算法的水质异常预警效果显著。此外,该算法作为实际项目中水质预警模块支撑获得了工程化的实现。
其他文献
在体外构建具有生物活性的三维多细胞体系是细胞3D打印的前提及关键环节。三维多细胞体系经培养繁殖达到组织再生、器官修复的目的,对生命科学和生物医药的发展意义重大。针对现有细胞3D打印使用生物支架或支撑带来的在细胞密度、细胞间通信、支架降解率、可打印性和生物相容性等方面的问题,本文提出了基于超声阵列声压微势阱非接触操控细胞构建细胞三维体系的方法。研究阵列声压微势阱细胞的操纵方法,引入细胞的脉冲微输送技
情感在人与人之间的互动中起着重要作用,在人机交互中也是如此。当机器能够感知到人类的情绪时,可以进行更具有个性化且具有针对性的交互,而情感识别是其中的一个关键技术。目前,脑电信号由于其高时间分辨率,已经被广泛应用于情感识别任务中。但现有大部分方法都是被试特定的,当已有模型应用在新的被试上时,其泛化效果差,极大阻碍了情感识别任务在实际场景中的应用。这是由于不同被试间的脑电信号差异巨大,已有模型很难适用
近年来,计算机和通信技术的快速发展,给不同领域注入了生机。不同的学科和计算机技术相互交叉、共同进步,其产物弥补了学科的空缺地带。网络控制系统是产物中的杰出代表之一,系统不同模块间使用网络来进行通讯,而不再是传统的双绞线,从而避免了连线复杂,难于扩展和维护等缺点。但是它也存在一些不足,如:数据包错序、网络时延和数据丢包等。如果忽略这些问题,势必会给系统性能带来不利的影响。因此越来越多的学者将目光聚焦
近年来,高光谱图像分类逐渐成为了高光谱领域中的研究热点,在国民经济发展和国家安全中都发挥着重要作用。高光谱图像具有维度高、冗余性高、数据量大等特点,对高光谱图像特征提取以提高分类准确度是高光谱图像分类任务中的关键问题,特征质量的好坏直接影响着分类准确度的高低。但是,高光谱图像的同物异谱和同谱异物现象、带标签样本数量少、样本标记成本高,以及巨大的数据量使得高光谱图像的特征提取和分类面临着许多困难和挑
二硫化钼(MoS2)是二维材料家族的典型代表,由于其内部结构与石墨烯相似,不仅保留了石墨烯优良的电、光、机械性能。同时其具有1.2~1.8 e V的可调带隙,并且通过改变厚度可以调控禁带宽度,因此在制备电子学器件(如场效应管、发光二极管、光电探测器)上具有独特的优势。随着科技的高速发展,要在芯片上集成大量元器件,传统硅材料会产生漏电和散热不佳等问题,而二维结构的二硫化钼单层薄膜厚度往往是小于1 n
随着现代信息科学技术的不断发展和计算机硬件水平的不断提高,人工神经网络在多个领域得到越来越广泛的应用。人工神经网络由许多非线性计算单元组成,可以通过训练获得处理复杂信息的能力。基于梯度下降算法进行训练的人工神经网络在实际应用中十分广泛,其原理是基于整数阶微积分理论对损失函数进行优化,从而改进神经网络的权值和阈值,使得神经网络在训练过程中不断调整,最终达到训练的平衡点。本文将基于分数阶微积分理论的梯
在实际工程应用中,考虑到产品使用便捷与外形美观等原因,工业产品会尽量减少非必要零部件。相对而言,在信息监测与反馈环节会较为薄弱,只会留下部分必要传感器。因此,对于这类工业产品,仅依靠自身携带的传感器很难得到精确且充足的采样数据,往往只能得到稀疏甚至非均匀的采样数据。若想要对设备进一步开发,首要问题是需要一个较为准确的数学模型,为研究提供基础。考虑到这一较为广泛的工程现象,对于此类仅能得到非均匀稀疏
调节阀作为工业控制中的执行器,是过程控制的关键环节,并且其调控性能高度依赖阀门定位器的硬件特性和控制算法。近年来,压电式智能定位器因其低碳和智能特性逐渐取代喷嘴挡板式定位器,成为一种更加有应用前景的阀门定位器。但国内在该技术领域起步较晚,和进口产品相比仍存在较大差距,尤其是在系统性能分析及控制算法方面仍有改进余地。本文在参考国内外相关文献资料和团队前期工作基础之上,开展如下研究工作:(1)对气动执
近年来,新发展理念推动工业生产制造向高质量发展行进,中国的制造业从粗犷式的增长形式逐步开始转型。永磁伺服系统凭借精度好,运行可靠,结构简单等优点,成为工业控制中的中流砥柱。针对水晶制造业,在切割打磨水晶时需要响应快速且稳定的永磁伺服系统,电流控制作为系统最内环的控制,其电流采样精度及响应时间与整个永磁伺服系统的性能直接挂钩。本文先简要介绍了永磁同步电机的基本结构,并依据坐标变换原理在不同坐标系下建
随着无线通信技术的不断进步,每一代无线通信系统都发生着跨越式的发展。在5G通信系统中,提出了一系列的技术以提升无线网络容量以及通信服务质量。为了提升单位面积频谱效率,下一代无线通信系统将在部分热点区域采用密集部署接入点(AP:Access Point)的方式来形成超密集无线网络(UDN:Ultra-Dense Networks)。通过密集部署的AP,实现了AP围绕用户、以用户为中心。一方面减小了用