MapReduce异构环境下调度优化综述

来源 :电脑知识与技术 | 被引量 : 0次 | 上传用户:evanchou8
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
Map Reduce作为一个分布式并行计算框架,在大数据处理方面得到了广泛的应用。该计算框架在同构集群环境中能够高效地运行,但是在异构集群环境中原容错算法不能正确地检测慢速任务,导致了性能的大幅下降。该文针对这一现象,分析了问题的主要原因,并且介绍了现存的几个优化算法,即Longest Approximate Time to End(LATE)算法,SelfAdaptive Map Reduce(SAMR)算法,Enhanced Self-Adaptive Map Reduce(ESAMR)算法,比较了各个算法的优缺点,最后指出了未来的研究方向。
其他文献
本设计为plc控制的三相鼠笼式异步电动机控制系统设计。主电路采用断路器、接触器、热继电器等元件组成,采用继电器、并关及西门子S7200完成控制部分设计。实现对电机的过流
2005年4月19日至21日,由中国工程院副院长沈国舫院士率领的17位院士考察团,实地考察了三峡工程建设、枢纽运行管理、库区移民安置和中华鲟保护工作,并与中国三峡总公司领导进
目的观察奥瑞凝胶对反流性食管炎模型大鼠食管黏膜的保护和修复作用。方法采用半幽门结扎加贲门肌切开术复制反流性食管炎大鼠模型,设模型组、奥瑞凝胶3个剂量组、阳性药对照
目的 探讨全部睡眠剥夺对健康男性青年脑电功率谱的影响。方法 选身体健康男性青年 (19~ 2 2岁 )自愿受试者 2 0名 ,剥夺全部睡眠 5 0h ,定时记录脑电图共 8次 (间隔 6h) ,
文中以板块构造理论为指导思想,以大量地质、物探、化探、遥感资料为依据,在全面分析前人对东天山造山带板块缝合线的认识基础上,重新厘定研究区准噶尔—哈萨克斯坦板块与塔
对2005~2007年度国家食品药品监督管理局受理的用于治疗脂肪肝的中药新药申报情况进行了梳理,分析了这些新药品种的基本特点,并结合笔者近年来参与此类中药新药审评的体会,对
引气剂掺入混凝土后,除影响抗压强度外,对其它性能无不良影响。只要引气量合适,普通混凝土均能获得较高的抗冻性能。
<正>随着国家、地方政府和人民群众对水资源认识的深化和经济的发展,越来越多的城市已将环境保护工程水污染治理项目建设纳入拉动地方经济的重头戏。在污水处理方面,选用二级
依据非酒精性脂肪肝的诊疗指南和医学进展,初步探讨中药治疗非酒精性脂肪肝的Ⅱ期临床研究的目的、试验总体设计、诊断标准及影响因素、治疗方案、观察项目、观察时点、质量