推测执行技术在HPMR系统通信优化中的应用

来源 :中国科学技术大学学报 | 被引量 : 0次 | 上传用户：nicolaskerry

【摘要】

：

HPMR（high performance MapReduce）系统是一个采用MapReduce模型的高性能计算软件支撑平台.在进行高性能计算时,HPMR往往需要很多轮Map-Reduce过程,中间的通信过程由KV路由和KV

【作者】

：

王昊王向前郑启龙

【机构】

：

中国电子科技集团公司第三十八研究所,中国科学技术大学计算机科学与技术学院,安徽省高性能计算重点实验室

【出处】

：

中国科学技术大学学报

【发表日期】

：

2010年11期

【关键词】

：

MAPREDUCE HPMR 推测执行 KV路由 KV传输 MapReduce HPMR speculative execution KV routing KV

【基金项目】

：

国家自然科学基金重点项目（60533020）, 核高基重大专项（2009ZX01034-001-001-002）, 安徽省自然科学基金（090412068）资助

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

HPMR（high performance MapReduce）系统是一个采用MapReduce模型的高性能计算软件支撑平台.在进行高性能计算时,HPMR往往需要很多轮Map-Reduce过程,中间的通信过程由KV路由和KV传输组成.KV传输依照KV路由阶段产生的KV路由表进行.HPMR程序的典型通信特征是每一轮的KV传输以高概率使用上一轮的KV路由表.根据这一特点,提出在HPMR的通信模型中引入推测执行技术,由此减少了KV路由的次数,使得HPMR的通信性能得到大大地提升.

其他文献

高校体育促进大学生精神成人的策略研究

高校体育在促进大学生精神成人中有其自身独特的优势。基于体育学、教育学、哲学、心理学、思政理论等学科的综合分析,研究认为高校体育在育人过程中应坚持以下策略:树立正确

期刊

高校体育促进大学生精神成人策略研究

板栗深加工产品开发技术

<正>(1)技术简介通过对板栗果实品质特性及果实褐变机制的研究,采用无硫护色技术成功解决了板栗褐变问题,并成功开发出软包装甘栗仁、冻干板栗、"开口笑"板栗、板栗超微粉及

期刊

深加工产品无硫护色

景德镇市文联陶瓷艺术中心

日前，记者从市文联获悉，继景德镇书画院、昌南瓷画院之后，市文联又顺应潮流，审时度势，依托自身优铸，以参股融资形式倾心打造一‘个集文艺培训、学术交流、艺术创作、精品展示、作品

期刊

景德镇市艺术中心陶瓷学术交流艺术创作书画院多功能瓷画

西门子S7-200以太网通讯协议研究

西门子S7-200 PLC网络模块采用S7协议通讯,本文分析S7协议的内容与帧格式,其目的是能够让客户自己编写程序,用自己的socket程序通过以太网读写西门子S200 PLC区数据。本文对

期刊

S7-200S7协议以太网通讯TCP/IP

房价上涨对城市人才的外溢性研究

近年来,由于城镇化进程加快,我国的房价一直处于居高不下的势头。房价上涨的过快在一定程度上会出现城市人才外溢现象。文章对人才和人才外溢含义进行了厘定,以需要层次理论

期刊

房价上涨城市人才外溢对策

论成人高等教育中班主任的作用

针对目前成人高等教育中的学生管理工作，本文分析了成人教育学生的特点，在此基础上探讨了班主任的重要作用及在学生管理工作中的误区，并提出了改进的建议。

期刊

成人教育班主任作用建议

药用基础化学课程标准解读

药用基础化学开设于大一第一学期,是大一新生学习的重要课程,对今后的后续专业课程非常重要。该门课程目标是根据学校人才培养方案、药学岗位要求以及执业药师考试大纲确立。

期刊

高职教育课程标准药用基础化学

开清棉设备改造及工艺效果分析

通过对现有开清棉工艺流程的调整及工艺参数的优选 ,减少了开清工序对纤维的损伤 ,改善了除杂效率 ,提高了产品质量 ,降低了能源消耗 ,使成纱各项指标均有所提高。

期刊

开清棉工艺流程调整效果分析

推测执行技术在HPMR系统通信优化中的应用

其他学术论文