基于MapReduce的数据密集型应用性能优化研究

来源 :2010年全国理论计算机科学学术年会 | 被引量 : 0次 | 上传用户:May-02
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  MapReduce是一种大规模数据处理的分布式编程模型,基于MapReduce实现的数据密集型应用,能够自动完成任务的分发和并行处理。本文验证了该模型的可扩展性,并针对现有部署方法存在的效率问题,提出针对数据密集型应用的资源需求特性,采用基于参数优化的方法,以缩短MapReduce任务的执行时间。实验表明,调整参数后的优化方案具有更好的执行效率。
其他文献
语言是人类交流最为主要和关键的工具,是思维最为主要的工具,也是思维的结果。思维的发展与语言的表达有着密切的关系。小学阶段是培养学生思维思考能力和语言表达能力的起步
期刊
化学传感器提供了方便、快捷、廉价的分析检测有毒重金属离子的方法,具有很高的灵敏度和选择性。检测对象专一的反应型光化学传感器受到越来越多的关注。本文综述了识别Hg2+
花样跳绳是一种非常有效的效能感运动,除了拥有运动的一般益处外,更具有其独特的优点.花样跳绳是一项健美运动,对维持心肺系统等各种脏器健康,提升运动效能感等都有相当大的
期刊
本文利用相关的声学、振动学、材料学和有限元数值方法,首先对层合隔声复合材料的设计原则进行了分析,而后利用有限元方法进行层合复合材料降噪性能预测分析,得到了与实验数据比
目前,用于制备聚合物纳米纤维的最有效的方法是静电纺丝方法。近年来,已通过静电纺成功制备了不同聚合物纳米纤维,主要是溶液和熔融聚合物。这种纤维的潜在应用已被开发,主要
学位
小学生正处于身心不断发展成长的时期,在小学的教学过程中加强对学生的体育教学十分必要。小学体育不仅能让学生在体育活动中有效促进身心健康发展,而且也能在体育锻炼中培养
期刊
英语阅读是围绕问题而开展的理解感知与感悟升华,是基于学生一定疑难问题基础上的合作探知。围绕学生阅读感知兴趣点创设多元化的问题,有利于学生在深度感知体验的基础上获得
期刊
音乐是一门艺术表现、鉴赏和情感熏陶的审美学科,学生的音乐知识、学习能力和与其终身发展有关的艺术品位、艺术修养的陶冶等素养的养成都离不开课堂教学。因而,我们在小学音
期刊
城市园林绿化可持续发展的目标是促使城市生态环境得到改善,保证城市的可持续发展.城市园林绿化建设应打破传统的植树造林的观念,应当赋予更多的内涵,如人文内涵、改善城市环
《波士堂》(BOSSTOWN)是由第一财经、东方卫视、唯众传播联合打造的一档充满娱乐精神的高端人物脱口秀节目。在上海东方卫视和第一财经电视开始播出,观众反应良好,已成为时下