云计算异构环境下Hadoop性能分析

来源 :集成技术 | 被引量 : 0次 | 上传用户:yushion
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
通过将虚拟化技术引入到传统的数据中心来实现计算资源的按需分配,云计算服务正获得日益广泛的应用,例如亚马逊所提供的弹性云计算服务EC2。另一方面,Hadoop作为MapReduce这一大规模数据的分布式并行计算模型的开源实现,在学术界和工业界都获得了越来越多的研究和应用。当前的一个研究热点问题就是如何将云平台这一异构化的底层基础设施,与Hadoop的上层计算模型有效结合起来,利用云平台所提供的弹性资源来充分发挥Hadoop高扩展性、高容错性、低硬件配置的优点。在这篇论文中,我们在异构云平台环境下进行了一系列的Hadoop性能测试和分析,并指出在这一环境下,由于虚拟机的高IO开销,导致Hadoop的性能相比传统的纯粹物理节点集群急剧降低。我们的工作可以作为研究云计算异构环境下如何提高Hadoop性能的一个重要基础。
其他文献
杨慎和王世贞皆以博学多产著称,他们涉猎广泛,不仅学术成就高,在文学创作方面亦有杰出成就。一方面,由于杨慎是一个与七子派诗学观相异的代表人物,王世贞对杨慎的创作、理论
高等医学院校实验室的主要任务是培养学生的基本实验技能,巩固理论知识,发掘学生从事科学研究的潜能,为将来服务于社会创造基本条件。因此,创建完善的医学教育实验室,无论是对学生
我国沿海地区和部分内陆地区广泛分布着软土地层,但软土地层的强度和渗透性较低、压缩性较高,使得在软土地基上修建好的高铁路基会在列车动荷载的作用下产生不均匀沉降,严重
高等师范学校的英美文学课是为培养和检验学生英美文学的基本理论知识和理解、鉴赏英美文学原著的能力而设置的一门专业理论课程,在英语专业乃至整个社会科学领域中都占有重
<正> 一、"海军码头休闲娱乐中心"概况"海军码头休闲娱乐中心"(NAVY PIER,以下简称 NP)是美国中西部最负盛名的旅游景点之一。其项目特点与我国北京市的"西单文化广场"类似,
土鸡生态养殖成为养禽业发展趋势,这与市场优势、管理优势、和谐社会发展理念等因素综合作用的结果,文章由此展开论述,以供参考和借鉴。
病案管理是医院管理的重要环节,病案复印是病案管理的重要工作内容。随着病案利用的深入,病案复印需求日益增长。本文通过分析病案复印过程中存在的问题,针对病案复印手续告
近些年来,河南省新型农业经营主体呈现出发展较快的趋势,整体发展前景较好。但不容忽视的是,新型农业生产经营主体在发展中仍暴露出如下问题,如土地流转工作有待进一步推进、
针对光伏系统输出功率的波动性和间歇性特点,提出一种基于主成分分析(PCA)和遗传算法(GA)优化的BP神经网络功率短期预测方法。通过历史功率数据和实时气象因素对输出功率进行
通过对影响汽车发动机使用寿命的主要因素分析、探究原因及有效的预防措施,指导汽车维修企业工作,改正以往不规范的操作与维护,加强汽车的正确使用与保养,延长发动机的使用寿