【摘 要】
：
针对海量数据处理问题,本文提出了一种基于MapReduce的数据处理模型,MapReduce编程模型具有高性价比和简单性的优点,MapReduce模型适用于海量数据的并行处理。该模型中取消了
【基金项目】
：
2014年度湖南省教育厅科学研究一般项目,《基于大数据的电子商务商品推荐系统的研究》,课题号:14c0234
论文部分内容阅读
针对海量数据处理问题,本文提出了一种基于MapReduce的数据处理模型,MapReduce编程模型具有高性价比和简单性的优点,MapReduce模型适用于海量数据的并行处理。该模型中取消了Reduce处理函数,Map函数处理完成后将直接输出处理结果,有效避免了Reduce函数及其任务处理所需的时间,并减少了Map与Reduce阶段之间操作所消耗的时间。该设计思想在基于Hadoop伪分布式云平台上进行了仿真实验,实现了文中提出的并行处理模型。
其他文献
本文结合高考能力考查的要求,重点归纳了《经济生活》二轮复习的几条线索,并进行了详细解析。
为了深入了解我院计算机文化基础课程教学改革效果,以及基于网络学习平台学生自主学习能力的情况,我院对11级和12级学生进行了问卷调查。调查了学生基础状况、基于网络学习平
随着现代城市建设所取得的成就不断扩大,原有的城市配电系统在新形势下已经很难适应城市发展的要求。本文将结合笔者多年实践经验对城市配电自动化系统进行规划和分析。
随着计算机和信息通讯技术的不断发展,计算机软件日趋复杂,也使得计算软甲漏洞变得更加隐蔽。目前,计算机软件研究主要停留在软件编写的安全性和软件弱点的消除方面。本文通
电力已经成为人们生活中不可缺少的一部分,所以供电企业的日常设备维护工作十分重要。标杆管理是通过比较衡量的方式来改进企业绩效的一种方法,可以有效提升企业竞争地位。强
企业文化是一个企业的灵魂,关系到企业能否持续健康发展,企业文化对内可以增强凝聚力和向心力,对外可以树立形象扩大企业影响。加强企业文化建设,必须结合自身实际,科学把握
计算机是当前社会发展中必不可少的设备,尤其是进入21世纪以来,计算机技术的极大发展,在很大程度上推动了社会进步。本文简要分析了当前计算机技术的发展趋势,介绍了新技术的
任何教育阶段学生都是学习的主体,任何有成效的教育教学都是以学生的成长为出发点和归宿点,实习作为高职院校教育教学重要组成部分自然也不例外。同时实习又是学校教学实训的
本文利用SSPS Clementine 12.0工具对住院患者来源地区进行分析,采用K-Means和Two Step两种算法进行挖掘,根据挖掘结果,为医院巩固已有医疗市场,开拓新医疗市场给出技术支持
随着全国计算机等级考试(NCRE)在我校的推广,报考人数急剧上升,怎样让报名信息的录入减少错误并提高报名工作效率,本文就此浅谈自己在报名工作中的处理方法。