云环境下基于阶段划分的数据密集型工作流调度方法

来源 :南京邮电大学 | 被引量 : 0次 | 上传用户:qqllql
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
云计算这一新兴计算模型的出现为数据密集型工作流提供了良好的运行环境。数据密集型工作流的运行往往需要多个云服务商的计算资源来支撑,合理的任务调度是其高效运行的关键。对于典型的数据密集型工作流而言,任务数量多,任务之间传输数据量大,涉及众多云服务商,工作流运行的整体完成时间和执行成本的双重优化一直是当前数据密集型工作流调度面临的热点问题。为此,本文提出了一种云环境下基于阶段划分的数据密集型工作流调度方法,首先基于任务的数据依赖将工作流划分为多个阶段,然后依次通过任务预分配和调度调整两个核心步骤为每个阶段进行任务调度,其中,任务预分配根据预估的任务执行时间和任务之间的数据传输时间对当前阶段中多个任务进行并行调度以尽可能缩减该阶段完成时间,而调度调整再基于特定条件将部分并行任务调整至同一服务商串行执行,以在不增加该阶段完成时间的前提下减少任务之间的传输量,从而降低传输成本,同时进一步减少完成时间。最终可通过逐阶段预分配和调度调整优化实现工作流完成时间和执行成本的双重优化。本文通过具体实例验证了工作流调度方法的可行性,同时设计并实现了仿真实验,结果表明本文基于阶段划分的数据密集型工作流调度方法相对其他算法在整体完成时间和执行成本上具有一定优化效果,验证了本文方法的有效性。
其他文献
近年来随着金融业发展,利用商业银行业务进行非法交易的行为也越发猖獗,在大量的交易数据中识别异常交易账号已经成为商业银行维护正常金融秩序的重要工作之一。目前商业银行
社会信息化发展的过程中,日益增加的网络信息安全问题引起了人们的广泛关注。密码学是实现网络信息安全的重要理论和技术基础,它可以实现信息安全中的机密性、完整性、认证性和不可否认性等安全特性。证书公钥密码体制不仅可以解决传统公钥密码体制存在的证书管理问题,而且可以克服身份公钥密码体制的密钥托管问题。同时,可以避免无证书公钥密码体制的部分私钥的安全分发和缺乏公钥认证的问题。基于此,研究和设计证书公钥密码体
全面预算管理是现代企业管理的重要手段之一,然而我国很多企业所实施的全面预算管理存在很大的缺陷,有些企业的全面预算管理甚至是形同虚设,这不仅削弱了全面预算管理的资源
在化石能源即将消耗殆尽的情况下,对新型可再生能源的研究迫在眉睫。氢能被公认为最具有吸引力的清洁可再生能源。硼氢化钠水解制氢因其储存容量高、产氢纯度高、反应条件简
西北地域独特的自然风貌总给人无限遐想,苍凉的黄土高坡,牛羊成群的绿色草地,淳朴憨厚的劳动人民,都是绘画创作的宝贵素材,我从小就生活在这片土地上,和这片土地有着深厚感情。维亚尔绘画具有强烈的东方意味,他运用主观的绘画语言,将自己的个人情感、理想信念融入作品之中,展现出了宁静、温情、闲适的诗意之境,与我对西北地域苍茫、孤寂、宁静的感受有诸多相似之处。《西部风景》系列油画创作以我生活的西北地域自然风貌为
随着经济全球化,招商引资成为了政府拉动经济飞速发展的重要手段。招商引资的形式和手段多样,有力的提升地方经济的发展。然而,随着招商工作的展开和深入,项目引进必然会以一
超密集网络(Ultra-Dense Network,UDN)的提出是为了满足5G及以后的移动通信系统超高容量和超高用户体验速率需求。然而,小小区的超密集部署也带来了小小区选择、严重的干扰、复杂的资源分配、频繁的小区切换等问题。为解决UDN带来的问题,业界提出了以“用户为中心”的概念,在以用户为中心的UDN中,用户周围的多个小小区被动态地组织成小小区簇,用户与簇内的小小区建立多连接,多个小小区协作为
毫米波具备大带宽、窄波束、器件易小型化等优异特性,同时波导缝隙阵列天线特点为空间结构紧凑、功率容量大、口径效率高。因此从技术与市场潜力角度出发,研发宽频带、高增益、易加工的毫米波波导缝隙阵列天线具有重要意义。本文主要研究毫米波波导缝隙阵列天线的宽频带高增益设计,并探索重量轻、易加工的毫米波波导缝隙阵列天线新结构。首先介绍了波导缝隙阵列天线设计的基本原理,主要介绍了矩形波导的概要及其传输特点,波导缝
本文描述的是写意人物画《陇原人》的创作过程,以及本人研究生期间对李伯安水墨人物画的学习。李伯安是笔者敬仰的画家,他的绘画造型精湛,气势磅礴,更令人震撼的是他那崇高的精神追求,和那艰苦卓绝,阳刚雄健的民族风骨。在笔者的学习生涯中产生了很大的影响,从早期到后期的作品中能够看到李伯安的表现风格和生活的印记,是笔者创作学习的重要内容。本文大致分为三部分,首先是对李伯安水墨人物画的特点分析,其次是通过学习李
档案解密工作是档案工作中重要一环,确保及时满足公民知情权的需要,保证了政府信息的公开,体现了档案的价值。近年来,我国一直在大力推行政府信息公开工作,档案作为重要的政府信息,在开放利用等工作中取得一定成果。但在涉密档案解密工作中,存在很多问题,档案不能及时解密,就难以满足公民的档案信息需求。加强档案解密工作的研究,探索和解决我国档案解密工作制度中存在的问题,使得档案解密工作更加科学有效的开展,已成为