MapReduce集群环境下的数据放置策略

来源 :软件学报 | 被引量 : 0次 | 上传用户:tyftyf123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
MapReduce是一种适用于大规模数据密集型应用的有效编程模型,具有编程简单、易于扩展、容错性好等特点,已在并行和分布式计算领域得到了广泛且成功的应用.由于MapReduce将计算扩展到大规模的机器集群上,处理数据的合理放置成为影响MapReduce集群系统性能(包括能耗、资源利用率、通信和I/O代价、响应时间、系统的可靠性和吞吐率等)的关键因素之一.首先,对MapReduce编程模型的典型实现——Hadoop缺省的数据放置策略进行分析,并进一步讨论了MapReduce框架下,设计数据放置策略时需考虑的关键问题和衡量数据放置策略的标准;其次,对目前MapReduce集群环境下的数据放置策略优化方法的研究与进展进行了综述和分析;最后,分析和归纳了MapReduce集群环境下数据放置策略的下一步研究工作.
其他文献
本文根据恩师我国声乐教育家金铁霖教授声乐课实况整理,以心理学在声乐第一课中的运用之法为赏析范畴,全文共分三部分。声乐是一门学问;结合时代分析声乐课堂中的教与学,即声
相对其他音乐表达形式,流行演唱作为流行音乐中主要的表达方式,演唱个性就决定了歌手能否从众多演唱者中脱颖而出并具有持续的演唱生命力,另外重视演唱个性的开发培养,对于流
奥尔夫音乐教学法是由德国音乐教育家卡尔·奥尔夫独创的注重综合创造性思维训练的音乐教学法。奥尔夫的音乐教育理念可以被概括为"原本性的音乐教育"。当前的学前教育专业舞
国际化要求青年干部具备与之相适应的国际化素质,这是参与建设和谐世界、实现中国梦想、体现人生价值的需要:国际化素质要求胸怀祖国、放眼世界、夯实本领、展示形象,加强立场情
本文对新疆连铸产业现状的调研和对八钢公司连铸生产铸坯质量问题分析,确定了以减少设备故障产生的缺陷铸坯数量,保障设备功能精度为目标的研究课题。在研究期间,从设备维修
眼底病变属中医视衣、瞳神疾病。目前针灸治疗的临床报道较少。在少数报道中,也多半采用调养肝肾的方法及从足太阳经治疗。我们参考古代理论,取足少阳膀胱经治疗眼底病,认为
在线性回归模型建模中,回归自变量选择是一个受到广泛关注、文献众多,具有很强的理论和实际意义的问题.回归自变量选择子集的相合性是其中一个重要问题,如果某种自变量选择方
随着医药卫生体制改革的深入发展和公众对医疗资源需求的逐年上升,门诊预约系统的推广和完善成为医院创新改革的重要内容。结合已有的国内外研究成果以及调研情况,分析了目前