【摘 要】
:
为应对未来智能电网海量数据信息带来的实时计算、分析等难题,文章首先在Hadoop云计算平台基础上搭建MapReduce框架,论证了其良好的数据计算性能,并通过实验发现MapReduce在
【机 构】
:
长春工程学院电气与信息工程学院,东北电力大学信息工程学院,吉林省配电自动化工程研究中心
【基金项目】
:
吉林省教育厅项目(2014317、2014309);吉林省科技厅科技发展计划项目(20130206049GX);吉林省发改委项目(2013118831);长春市科技局项目(2013266)
论文部分内容阅读
为应对未来智能电网海量数据信息带来的实时计算、分析等难题,文章首先在Hadoop云计算平台基础上搭建MapReduce框架,论证了其良好的数据计算性能,并通过实验发现MapReduce在进一步提高计算效率方面的诸多问题——任务调度不均、数据偏移、异构环境下适应性差等。随后考虑MapReduce原始调度方式的弊端并给出均衡数据映射、评估节点性能的MapReduce架构改进方案,并提出了动态匹配的调度算法(DMSA——Dynamic Matching Scheduling Algorithm),最后通过在仿真平台上的集群实验,减少了系统计算资源的消耗,缩短了运行时间,显著地提高了集群性能,同时增强了数据本地性,证明了该策略提高MapReduce计算效率的可行性。
其他文献
<正>笔者从开始养蜂至今,未出现过巢虫危害的问题。现将一些心得和体会分享给大家,希望能对大家有所裨益。同时希望能凭自己的绵薄之力,不让中蜂受巢虫侵害之苦,为中蜂提供更
本文总结了在温带地区用挤塑式聚苯乙烯泡沫塑料板做倒置式屋面的设计施工经验。文中用细石混凝土做找坡层、防水层厚度可以适当减薄、保温层厚度的确定方法、保护层的几种做
为了解广西中华蜜蜂的形态特征以及分类地位,探究与云南中华蜜蜂杂交后代的形态差异及杂交优势。采集6群广西中华蜜蜂、6群蒙自中华蜜蜂及2群杂交子代,每群测定分析15只工蜂,
建筑行业与科学技术的有机结合,衍生出了智能建筑这一异于普通建筑的产物。论文简介了这一发展过程,分析了智能建筑系统的设计要素,介绍了智能建筑系统的发展方向及发展前景
研究了粉末316L不锈钢添加活化剂的液相强化烧结。在1200~1350℃采用真空烧结,对含量为2%~8%的Cu3P和Fe Mo B两种烧结助剂进行比较,后者采用两种粒度。结果表明:Fe Mo B细粉强
本报北京2月1日电 (记者潘跃)1日,国新办举行新闻发布会,民政部有关负责人介绍2017年民政事业改革发展情况。$$2017年民政部、公安部等部委联合开展养老院服务质量专项行动,对全国
汉字结构与汉字拼写张恩普汉字拼写是汉字学习的一种新方法,是汉字研究的新课题。所谓汉字拼写,即以汉字的基本字素为单位,以方块字形为结构形体,运用较少字素去组合众多汉字的汉
北洋政府统治时期,兵祸和匪患猖獗,中国俨然成了兵祸与匪患的王国,兵祸和匪患是北洋政府统治时期极显著的社会现象。民谣既是人民抒发内心痛苦的方式,也成了反映社会基层民众
<正>在众多的引进节目中,"真人秀"占很大比例,而以韩国tv N电视台的《花样爷爷》、《花样姐姐》为代表的旅行真人秀节目更是在中国电视荧屏上大放光彩。本文对比中韩两版《花
班主任担负着进行学生的思想政治教育工作,帮助学生树立正确的世界观、人生观和价值观,使之成为全面发展的实用型人才的重任,其有效的工作是培养学生健全人格、良好个性、优