Hadoop中云数据负载均衡算法的研究及优化

来源 :2012年江苏省计算机学会网络与分布计算专委会和网格与服务计算专委会联合学术年会 | 被引量 : 0次 | 上传用户:evaxiang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  介绍了Hadoop的数据负载均衡算法,为了提升Hadoop数据负载均衡算法的效率,文中提出了超负载机架的优先处理及引用排序策略的解决负载均衡的改进算法。实验证明了改进算法在特定的环境下或能够在较短的时间内使各个机架的数据负载达到平衡以及能够优先处理负载超大节点。
其他文献
30例尘肺患者血液粘度分析锦州市直机关医院(121000)何素云尘肺患者由于多有呼吸困难,可造成肺部通气和换气功能障碍,引起缺氧和二氧化碳潴留。长期缺氧,骨髓功能旺盛,红细胞增多,红细胞压积
蒋介石用人,注重论资排辈,讲究仪表,衣裤须烫得笔挺,皮鞋须擦得锃亮。蒋经国用人,不重视仪表,只要那个人能说能干,对他忠诚,就是好干部。蒋经国想培植某人,他不循常规,予以破
地产发展到今天,尤其是经历了土地公开招拍挂的高门槛和121文件紧箍咒的两大洗礼,传统的杠杆式单向流动的呆滞资金(链)模式几近失灵,如何建立全程和双向循环的良性资金(链)模
  本文针对自行研制的二维爆轰驱动动力学计算程序LSFC2D的结构化网格特点,采用递归对分的区域剖分技术以及全局重分和局部微调相结合的动态负载平衡技术,实现了欧拉网格间
小麦是泽普县重要的农作物,泽普县积极运用先进的无人机飞防技术,进行小麦病虫害防控.该文首先从安全性高、用药节约、防控效果显著、实现夜间作业等方面介绍无人机飞防技术
  传统网络编码可以减少数据包的转发次数,但会造成数据包较大的延时,且容易造成网络的拥塞,本文提出一种基于部分网络编码的实时多播协议——PNCRM.该协议将部分网络编码
  文中提出了一种改进的安全全文索引结构,通过在倒排索引中对词条进行加密以抵抗语义分析攻击,屏蔽词条位置和频率信息以抵抗统计攻击,使用分块加密策略以抵抗已知明文攻击,使
免疫功能检查在锰中毒普查中的作用初探内蒙古包头医学院劳动卫生教研室,内蒙古包头医学院免疫教研室(包头市昆区钢铁大街,014010)吴骏,任建梅,王素华,马栓柱包头市东河区卫生防疫站王炳禄
20多年前,从四川仪陇贫穷的深山沟厶里,走出一位15岁的少年。他走南闯北,在四川攀枝花捡垃圾,到云南昆明蹬三轮,去贵州贵阳、广西南宁修铁路,在陕西汉中当砖瓦工……为了谋生
  为了解决数据网格环境下的副本选择问题,提出一种基于相似场景推荐的数据网格副本选择策略。策略结合数据网格环境的特点,将影响副本选择的因素归纳为场景、用户QoS需求偏