【摘 要】
:
MapReduce是Google提出的一种分布式计算模型,已在海量数据处理领域得到了广泛的应用,本文提出一种基于树型结构的新型MapReduce并行模型,该模型适合于利用Internet或Intrane
【机 构】
:
湖南科技大学 计算机科学与工程学院,湖南 湘潭 411201
论文部分内容阅读
MapReduce是Google提出的一种分布式计算模型,已在海量数据处理领域得到了广泛的应用,本文提出一种基于树型结构的新型MapReduce并行模型,该模型适合于利用Internet或Intranet环境下不可靠的桌面PC资源,进行海量科学数据分析,该模型以P2P的形式将计算节点进行组织,模型的底层采用了P2P-MPI框架,采用基于消息传递的模式来实现MapReduce应用层,在MapReduce应用层的实现中,在Map阶段采用广播的形式来分发数据块,在Reduce阶段建立反向二叉树来实现有效的结果合并和化简,将本文所提出的MapReduce模型与现有主流MapReduce模型进行了比较,结果表明,基于树型结构的MapReduce并行模型在容错性能方面具有较优的性能,且系统简单,易于应用开发.
其他文献
作者的目的为综合研究不同浓度下(包括10mg/m~3——最高容许浓度),CS_2对女性机体可能产生的不良影响。根据空气中CS_2含量及劳动性质,作者将女工分为两组。第一组167名,为
在小学数学教学课堂,教师要重视提高学生数学审题能力,通过加强学生审题水平,利于提高学生数学实践水平,从而保证课堂教学质量.在有效的分析过程,教师要结合学生学习情况,科
在新课标的指引下,小学语文教学不断涌现出各种全新的教学方法.情境教学,就是其中被证明有效且广泛应用的.根据笔者的研究和总结,本文对小学语文情境教学的理论与对策进行了
这是一个非常漂亮的女孩,一个人见人爱的女孩。 你说你并不熟悉她,那也无妨,只要你愿意走近她,向她表示友好,她便会毫不迟疑毫不吝惜地向你献上一朵甜甜的静静的笑。 然而,
数学是一门逻辑性极强的学科,培养学生的独立思考能力,才能使学生在思考中理解与学会数学知识,并促使学生的数学自主学习发展.小学正是学生进行数学学习的重要时期,教师应加
本文的研究意义是为了帮助汉语学习者能在不同的语境运用各种各样的道谢应答语,同时为教师们提供一些针对这个问题的教学对策.以语用学言语行为的理论为基础,本文研究对外汉
柴油打桩锤的油门开关一般都是采用人工拉绳控制的,既费力又费时,还容易发生故障,特别是当桩快打到标高时,测量和打桩工都十分紧张,往往在传递信号的瞬间又多打了几锤,难以
以广州东华职业学院为例,分析审美教育在高职院校中的重要意义,根据广州东华职业学院学生学情分析及该校审美教育的基本情况,指出其中存在的问题,提出解决案.
自发性气胸为矽肺和肺结核的一种严重并发症。根据多数国内外文献资料,单纯性矽肺时自发性气胸的发生率约3%左右,且绝大多数发生在矽肺Ⅲ期,肺结核并发气胸,近年来似有增多
数学是一门十分抽象且思维能力要求较高的学生,传统的教育方案让学生很难将注意力集中于课堂,也很难对于数学知识感兴趣,这使得学生很难将数学学习好,小学阶段的数学知识是数