异构资源环境下Hadoop节点能力自适应调度算法

来源 :计算机应用研究 | 被引量 : 0次 | 上传用户:cjn2503687
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
为了解决当前Hadoop集群在异构资源环境下固有的调度分配方法的不足,提出了一种基于节点能力的自适应调度算法NCAS(node capacity adaptive scheduling)。首先,NCAS算法根据节点性能、任务特征计算得到调度因子;然后,由调度因子确定各节点应分得的数据量与任务槽数;最后,将数据和任务多分给快节点同时少分给慢节点。实验结果表明,与传统的调度算法相比,NCAS算法大幅度减少了备份任务的启动数量,明显减少了作业完成时间,提升了任务执行效率。
其他文献
网络技术的飞速发展,转变了人们日常的生活方式,其中最为明显地打破了传统的购物形式,拓展了多种网络购物渠道,不仅丰富了人们的生活内容,也为人们购物提供了更多便利。大学
在信息化与全球化的今天,企业必需利用先进的企业治理思想和管理信息系统来完善管理与发展。但在实际工作中,许多公司并没有重视到财务管理及其系统的重要性,其现状存在很多
当前,我国经济处于“新常态”时期,企业要想在激烈的竞争中获得竞争优势,就需要不断地创新。知识共享能够促进知识创新,但在研究知识共享影响因素时发现组织政治知觉会对知识
目的 :探讨非言语型学习障碍 (NLD)儿童的右脑功能状况。方法 :选取正常儿童和言语型学习障碍(VLD)、NLD儿童各 2 0名 ,进行速示下记忆实验和本顿视觉保持测验 (VRT)测试。结
为了进一步加强审计监督、强化工程决算审计,针对重点基础建设项目审计中专业性强、技术性强的任务,利用中介机构形成外包管理机制能在提升工作效率的基础上,夯实管理效率,推
本文主要综述了鸡蛋粉的营养特征及其在畜禽生产中的应用。
目的探讨输尿管息肉双源CT泌尿系造影(DSCTU)的影像学特点。方法搜集7例经病理证实为输尿管息肉患者,行DSCTU平扫和多期增强扫描,并行各期后处理重组,分析其影像特点。结果 7
2006年,我国中小企业创造的GDP已经超过社会生产总值的55%,提供了超过70%的就业岗位,在满足就业需求和缓解就业压力方面做出了巨大贡献。充分利用中小企业的吸纳就业优势,缓
目的研究PDCA循环理论。方法将我院2015年2月—2016年2月间收治的50例PICC置管患者,按照入院先后顺序划分为对照组25例和观察组25例,对照组患者接受常规导管护理措施,观察组
报道了用液相色谱法测定微量氨基甲酸酯农药的方法,氨基甲酸酯先在碱性条件水解,生成的酚用液相色谱安培法测定。