异构Hadoop集群下自适应平衡数据存储的大数据放置策略

来源 :现代电子技术 | 被引量 : 0次 | 上传用户:yangyilong
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Hadoop是一种处理和存储大数据的平台,针对异构Hadoop集群下采用均等数据分配方法易降低系统计算性能的问题,提出一种自适应平衡数据存储的大数据放置策略。根据异构集群中各节点的计算能力比例,将数据分配到节点中。在任务处理过程中,根据反馈的任务完成时间信息,动态更新节点的能力比例,自适应调整数据分配,从而使异构Hadoop集群中各节点处理数据的时间大致相同,降低节点之间的数据移动量,提高了节点利用率。实验结果表明,该策略能够有效缩减任务完成时间,提高了系统的整体性能。
其他文献
例1,女,34岁。固头晕、呕吐,视物模糊2d,加重1h入院。该患与其它2名患者于5d前同时搬运甲醇.并一直住在甲醇库房中,近2d出现头晕,双眼胀痛,视物模糊,伴有恶心,频繁呕吐,呕吐物为胃内容物
夫妻之间的性欲望存在着一种规律。即性节律。这是继生物钟之外的另一大节律发现。英国学者研究认为,男性性节律是以15天为一循环周期,女性则是以27天为一循环周期。
我院依据专业相关岗位职业能力的要求,参照国家相关职业资格认证标准,校企共同设计《机械CAD/CAM》课程内容。课程的项目与项目之间由浅入深、循序渐进,各项目从简单到复杂选择多个产品依次完成各任务,任务的选取考虑课程内容的全面性、专业岗位工作对象的典型性和教学过程的可操作性。《机械CAD/CAM》课程的项目化教学改革,满足了专业人才培养目标的要求。
知识服务是图书情报领域适应知识经济社会发展需求的必然选择,也是高校图书馆服务方式与内容的拓展与深化。通过分析教育教学目标下用户的知识需求,提出构建出面向教育教学的
通过系统论述空气过滤器在商业空调系统中的作用和准确确定过滤器清洗时间的重要性和必要性,并对两种空调风机运行工况的实测和分析,得出用过滤器前后压差的增量来确定过滤器清