基于MapReduce和Spark的大数据模糊K-means算法比较

来源 :河北大学学报:自然科学版 | 被引量 : 0次 | 上传用户:wht000a
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
从原理和实验2方面对基于MapReduce和Spark的大数据模糊K-均值算法进行分析比较,并对2种大数据开源平台的优缺点进行了总结.由于模糊K-均值算法是一种迭代算法,需要对部分数据进行重复操作以得到最终聚类结果,因此主要从算法执行时间、同步次数、文件数目、容错性能、资源消耗这5方面进行比较,得出的结论对从事大数据研究的人员具有较高的参考价值.
其他文献
军事职业作为一种特殊职业,社会性是其基本属性。为充分说明军事职业的重要地位和作用,基于军事职业的社会属性,明确军事职业吸引力的概念,研究分析军事职业吸引力的特点、功
美国胸科医师学院及危重病学会关于脓毒症、全身炎症反应综合征及多器官功能障碍的定义。1 感染(Infection):指微生物侵入及存在于机体并引起炎症反应。2 菌血症(Bacteremia)
[目的]探讨喉全切除术后咽皮瘘的发生率、治疗效果和发生相关因素.[方法]回顾1990年至1995年于中山大学肿瘤防治中心住院治疗的107例行喉全切除术的患者,应用SPSS统计软件统
目的研究糖耐量减低(IGT)者尿中微量蛋白的改变,监测IGT的进展和预防糖尿病(DM)的发生.方法采用速率散射比浊法检测尿β2-微球蛋白(β2-MG)、α1-微球蛋白(α1-MG)、转铁蛋白
为探究白洋淀不同区域荷叶品质和抗氧化性的差异,对白洋淀7个有代表性采样点的荷叶进行了研究.实验结果表明,白洋淀7个采样点荷叶的品质和抗氧化性差异明显:杨庄子和烧车淀采
期刊
本文就综合医院放疗科的特点,对如何加强质量管理加以探讨:狠抓本科自身建设;建立一套科室的质量管理制度;密切与职能科室的联系,保证机器的质量,加强与临床科室合作,提高医疗质量水
上海市肿瘤研究所所长高玉堂等研究证明,黄曲霉毒素暴露(即摄入被黄曲霉毒素污染的食物)与肝癌发生有直接联系,同时发现乙肝表面抗原暴露对肝癌发生有明显协同作用。人体肝癌
于2018年5月(春)、8月(夏)和10月(秋)对白洋淀26个采样点轮虫物种组成和群落结构进行了系统调查,测定了水温(WT)、溶解氧(DO)、pH值、水深(WD)、透明度(Tr)、总氮(TN)、总磷(
突如其来的新冠肺炎疫情对经济发展和就业格局造成了前所未有的冲击。就业是最大民生,也是劳动者融入社会生活,实现自我价值,为家庭和后代带来幸福和希望的途径。就业稳、收