基于快速Spark人工智能架构的大数据挖掘算法

来源 :黑龙江工业学院学报(综合版) | 被引量 : 0次 | 上传用户:jj2653026
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对当前大数据背景下数据挖掘中存在的递归效率低,挖掘冗余度高以及周期过于频繁等难题,提出了一种基于快速spark人工智能架构的大数据信息挖掘算法。首先,通过大数据统计的方式,获取数据智能spark分布的基础上,设计了一种基于事物垂直管辖维度综合控制机制的纵向序列,提高了挖掘过程中的递归效率;随后采取spark动态行为挖掘机制,构建了挖掘模式集,能够在最短时间内生成用户行为树,有效降低了挖掘过程中的冗余度;并将在挖掘过程中将用户行为树及数据集合数进行一一映射,进一步降低因过于频繁而导致的周期收敛困难的问题。仿真实验表明,所提算法对挖掘过程中的数据准确度更高,且挖掘时间要显著低于对照组算法,具有很强的实践价值。
其他文献
“如果没有深圳的安居型商品房,我想我和妻子与广大的深漂族一样,肯定选择租房。”今年33岁的梁卫平说,“对我们这种收入来说,如果房价很高,生活压力是相当大的。”$$2016年1月,梁
报纸
目的探讨宫颈癌的早期筛查及护理宣教方法。方法选取我院2017年1-12月收治的120例育龄期妇女为研究对象,随机分为观察组60例和对照组60例,对照组进行常规护理,观察组在对照组
根据量子力学中简并情况的微扰理论和氢原子斯塔克效应的微扰矩阵元,得出了外电场中n=4能级的斯塔克效应的能级分裂情况.
目的 :探讨慢性酒精中毒性周围神经病的电生理改变特点。方法 :对 18例慢性酒精中毒性周围神经病患者进行肌电图、神经传导速度和F波检测。结果 :18例慢性酒精中毒性周围神经
目的研究苦参碱对人胃癌细胞诱导凋亡作用及端粒酶活性变化。方法苦参碱处理人胃癌细胞株SGC-7901后,用四甲基偶氮唑蓝(MTT)法测定细胞生长抑制效应,显微镜下观察胃癌细胞形
在经济全球化日益加速的驱动下,中国汽车工业在近些年来发展迅速。汽车工业是当前我国带动经济发展的支柱产业之一,汽车零部件行业作为整个汽车工业中的上游产业,增长速度和
选取香蕉、菠萝、草莓提取物分别与甘谷二肽进行Maillard反应,反应溶剂为85%丙二醇-水溶液(40 m L),反应温度130℃,反应时间4 h,提取物与甘谷二肽的质量分别为6.75 g,0.55 g,
<正>威廉斯(Raymond Williams,1921—1988)[1]是英国20世纪著名的"新左派"马克思主义"文化研究"理论奠基人之一。他的"文化唯物主义"(Cultural Materialism)意识形态论[2],为
建设中原经济区,农业和粮食是基础。大力推进粮食信息化建设,是粮食产业由传统迈向现代、由粗放转向集约又好又快发展的关键性因素。党的十八大报告提出了"新四化"建设,变"三
近年来,伴随着市场经济的发展,我国事业单位系统改革也不断地深化,针对事业单位管理工作亦提出了更高的要求。财务管理工作是事业单位进行管理工作的关键部分,对事业单位整体