集群系统中基于Http协议的流量控制与负载均衡

来源 :中国科学院寒区旱区环境与工程研究所 | 被引量 : 0次 | 上传用户:vforvivid
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当前,随着Internet的普及,越来越多的网络应用开始深入人们的工作与生活,其中,资源共享是互联网最根本的应用方式之一,而资源共享中,基于HTTP协议的文件共享又表现为多种形式。HTTP协议是一个基于无状态保持的协议,多家通用软件商提供了多种基于HTTP协议的服务产品,InternetInformation Service就是其中一种,而所有这些服务器产品均提供了丰富的通用功能,对于特殊情况下的功能需求并未能很好的解决,例如流量控制、负载均衡等等。   在大规模的基于HTTP的应用中,流量控制和负载均衡是资源合理利用的重要处理方式,针对单个服务器,本研究从下载行为甄别与阻止、盗链行为甄别与阻止、单线程速度限制等几个方面入手,较为完整的按照预期目标实现了高效合理的利用有限的硬件与带宽资源,达到了流量控制的目的,同时,考虑到系统在真实环境中的安全可用度,还增加了密匙服务,采用人工密匙和动态密匙的双重加密算法,使系统的防盗链、防下载、速度限制功能无法从外部进行破解。   对于集群式的资源共享系统,整个计算环境中拥有多台的服务器,每个单独的服务器在任意时刻所承担的负荷由本机物理性能和用户访问行为共同决定,而要处理好负载问题使全体服务器在任意时刻都拥有相对平均的负载,则必须解决好提供服务的资源位置问题,而实际上,一个系统中一个资源只有一个副本的情况是无法满足负载均衡的需要的,所以本系统中设计并建立了一套运行机制,使整个系统中同一个资源的副本可以动态发生变化,在需求增强的时候可以存在多个副本,而当需求减弱的时候副本的数量会自动减少,存在的多个副本由负载均衡系统自动决定为用户指派哪一个供其访问,实际效果中所有服务器的负荷相对平均,在5分钟曲线中获得负载最大差值不超过平均负载的4%,属于可接受范围。本研究除流量控制和负载均衡外,还提供了良好的应用扩展性,其中流量控制部分允许对访问用户分级,便于商业操作,负载均衡部分允许系统管理员在桌面对全体服务器进行统一监控和管理,大大方便了集群系统管理员的工作。   本研究以真实存在大型流媒体站点为研究对象,该站点拥有100余台服务器,10,000M的带宽资源,超过400,000的真实用户,日PV值峰值达到1,400,000次,以该系统为范本,在其上进行增量性设计与开发,并且在研发结束后实地运行三个月,收集、计算并最终确认了部分经验型参数的最终值,纠正了部分设计缺陷,最终实现了全部预期效果。
其他文献
在这个报告中,我们主要关心沙漠中的形态丰富的斑图。首先用耦合映射格子模型进行模拟,探讨了单风向下沙波纹的产生和演化、植被附近的沙波纹形态,沙波纹中缺陷的运动,缺陷数目的
进入2000年,江苏省射阳县新坍镇党委对任期届满的9个农村党支部书记,全面实施了竞争上岗,使4名原支部书记继任,5名优秀党员走上支部书记岗位,在全镇干群中引起了较大反响。
20世纪50年代以来,集装箱运输从陆上推向海上,并迅速成为世界贸易的主要运输方式,深刻影响了全球港口体系的发展与演化。90年代以来,随着世界集装箱航运重心向东亚地区的转移,中国
据新华社3月7日讯,中共中央总书记、国家主席江泽民今天上午在参加上海代表团审议时指出,在新世纪里,全党和全国上下都必须适应新形势,迎接新挑战,增创新优势,赢得新发展,为
大数据和各种穿戴设备渗入医疗行业,已经让纸质病历显得非常落后,但大部分医生仍然在用传统方法为病人诊治。这是为什么?大卫·布卢门撒尔自2009年起一直在推动美国的医疗记
广西民族音画《八桂大歌》由张继钢领衔导演,集合了国内一流艺术家倾情打造,开民族音画先河。  《八桂大歌》曾荣获国家文华大奖、国家舞台艺术精品工程精品剧目奖、中国艺术
江泽民总书记在广东高州领导干部“三讲”教育会议上语重心长地指出:“每一个领导干部都应好好想一想,参加革命是为什么?在领导岗位上应该做什么?将来身后应该留点什么?把这
原平顺县石城镇黄花村供销社职工、共产党员王来先 ,于1997年夏季的一天 ,在石城村从河南省禹县段某手中购买白色粉面毒品7000克(每500克85元)。之后 ,王来先又以每500克100元的价格卖给平顺县粮食
在干旱区,由于气候、水文地质条件和无排水系统的影响,不合理的灌溉洗盐方式致使灌区内潜水位普遍上升,存在土壤次生盐渍化的风险,威胁当地的水土环境安全。包气带作为地表灌溉与
江泽民同志关于“三个代表”的重要论述,从面向新世纪,建设一个什么样的党,怎样建设党的高度,明确指出了提高党的执政水平和领导水平的目标要求,是新时期党建工作的指导方针