工业大数据分析建模平台研究与实现

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:hoko0428001
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
如今,全球掀起了的新一轮工业变革——智能制造,而工业大数据作为制造智能化的核心驱动力之一,已成为了工业领域的研究热点。作为工业大数据分析技术的关键环节,分析建模的好坏将会直接影响工业大数据分析的质量与效率。然而工业大数据分析发展至今,在数据采集和算法研究上取得了较大的进展,数据完整性和处理能力有很大的提高,相对而言,构建分析模型的能力较为滞后,数据难以转化为可直接进行决策的信息。因此,本文以工业大数据分析建模为研究对象,对其建模方法体系进行分析,并设计开发了工业大数据分析建模平台。主要研究内容如下:(1)通过分析工业大数据中业务梳理、数据支持、分析建模和平台的内部组成和各部分之间的关系,基于CRISP-DM模型形成工业大数据分析建模方法体系,在此基础上对工业大数据分析建模平台进行需求分析,并形成了平台的总体架构;(2)针对支持多计算模式的大数据计算框架问题,首先基于Lambda架构提出多模式大数据处理架构;随后筛选出批处理和流处理两种计算模式下典型、开源的大数据框架进行性能测评;最终形成面向工业大数据分析建模平台的Hadoop+Spark+Flink多模式集成的大数据计算框架;(3)针对大规模、强关联、多维度的工业大数据可视分析问题,提出了基于聚类挖掘算法的可视分析方法。通过将K-means算法与平行坐标法结合,解决工业大数据强关联、多维度的可视化问题,提高数据挖掘的准确度和易见性;随后基于Flink大数据处理框架完成K-means聚类算法的并行化改造,解决大规模工业大数据的计算问题,提高数据挖掘的效率;(4)基于Hadoop、Spark、Flink等开源大数据框架,利用Java Web相关开发技术,完成了工业大数据分析建模平台的开发。
其他文献
心血管疾病已成为21世纪危害人类健康的“首要杀手”,是人类疾病死亡的主要原因,占死亡率的42%。其中,心肌肥厚(myocardial hypertrophy,MH)作为心脏结构从可逆性改变向不可
本试验主要是对二氢杨梅素作为水产生物饲料添加剂进行研究,试验对象为鲤鱼。试验结果显示:在基础日粮中添加DMY含量为0.125%和0.25%,可以极显著提高鲤鱼WGR(P
鬼成像作为近二十年兴起的新型光学成像技术,与传统光学成像原理完全不同,并具有其独特的成像优势,比如:可对位于苛刻或复杂的光学环境中的目标物体进行成像;突破经典瑞利衍射极限实现高分辨率成像等。传统的计算鬼成像方案中,通常采用随机图样作为照射光场,需要采样数为图像像素点数的几十倍才能取得良好的成像效果。最近研究发现:利用Hadamard等正交基图样代替随机图样可获得高质量的成像效果。其中可快速获得近完
鬼成像也叫做关联成像,属于单像素成像的一个重要分支。与传统成像方式比较,鬼成像将图像获取和重构图像的过程分离开来,称为“隔物成像”。鬼成像的这一特点也使其可以在不同的恶劣条件下实现成像。本文提出应用图像处理中准最优变换的离散余弦变换——DCT结合边缘检测技术实现对目标物体在低采样率下的鬼成像高质量图像重构及前置边缘检测。该方案可以推动鬼成像快速成像和边缘检测方面的研究进程,旨在鬼成像技术更快更好的
自1950年美国菲德尔公司首次启动股权激励计划以来,股权激励制度经历了70年的发展。股权激励的内容日益完善并且类型也日益多样,从单一的股票期权激励模式到后来多种类型组合
[目的]本研究利用基因芯片技术,分析针刺人迎穴对SHR主动脉弓基因表达谱的影响,寻找针刺调控SHR的干预靶点,揭示针刺对SHR的降压及血管保护作用机制。[方法]实验一:针刺人迎
交通灯编解码能够广播交通灯信息,为车辆和行人提供快速的非视觉交通灯消息获取途径,有利于提高交通效率。行人是交通事故中的易受伤害人群,行人检测能够识别出交通参与者中
“互联网+”时代的到来使整个社会各行业都面临着巨大变化,“互联网+”这一概念更是在2015年上升为我国的国家战略,在发达国家和我国的经济发达地区,已经开始深入探索互联网在重塑教育方面的无限潜能,2018年教育部发布的《教育信息化2.0行动计划》中提出,到2022年要基本实现教学应用覆盖全体教师、学习应用覆盖全体适龄学生、数字校园建设覆盖全体学校。那么位于经济不发达地区的、信息技术较为薄弱的学校就亟
目的:通过16S r DNA测序技术观察高脂饲料饲养的自发性高血压大鼠肠道菌群的分布特征,探讨黄连解毒汤对该模型大鼠肠道菌群的影响,为中医药以肠道菌群为靶点防治高血压病提供
大气氮沉降对生态系统的影响受到全球的广泛关注,我国是大气氮沉降的主要地区之一,研究氮沉降会对我国森林植物的影响具有重要意义。本文以不同种源地的五角枫(Acer mono)和油