基于深度强化学习的大规模自适应服务组合问题研究

来源 :东南大学 | 被引量 : 9次 | 上传用户:fslihua
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在面向服务的系统架构中,将已有的简单服务组合起来构建满足用户复杂需求的增值服务,即服务组合已成为一项极具实际价值的研究热点。随着Web服务技术的快速发展,大量功能属性相同而非功能属性(QoS)各异的Web服务大量涌现,服务筛选及组合优化成为服务组合问题面临的挑战。一方面如何在保证服务组合业务流基本功能的基础上,在大规模的服务场景下为每个任务选择合适的服务以达到最优的组合结果(QoS最大化);另一方面,基于网络的Web服务具有内在的动态变化性,组合的环境也是复杂不稳定的,组合系统需要保证其自适应性,面对外部环境的变化和服务自身的演化作出及时的反应和调整。针对以上挑战,Web服务组合系统需要在大规模动态性服务组合场景下仍保持准确性和高效性是目前亟待解决的问题。本文主要围绕基于大规模、自适应性服务组合展开研究,主要完成了以下工作:(1)根据服务组合流程的复杂性和候选服务的多样性所造成的服务组合规模庞大的问题,提出了一种基于深度强化学习的自适应性服务组合方法。该方法利用深度学习循环神经网络优化强化学习算法,预测目标函数、增强其表达和泛化的能力,有效的解决了传统强化学习在面对大规模或连续状态空间问题上的缺陷,在大规模动态性服务组合场景下具有极高的应用价值。(2)本文采用启发式的行为选择策略,将状态集分为隐藏状态和完全可见状态。有效的模拟隐藏状态空间下的策略空间和完全可见状态下的评估函数,采用针对性的行为选择策略,进一步的提高组合结果的准确性和效率。(3)本文通过一系列的实验验证了本文提出方法的有效性、可扩展性、自适应性和显著性,进一步的证明了该方法在大规模动态服务组合场景下的优势,相较于传统强化学习解决服务组合问题在组合结果和效率上都有了明显的优化。
其他文献
<正>2017年江苏高考数学试卷的总体特征就是立足基础,注重对考生能力的考查.试卷总体结构稳定,涉及的知识点比较全面,对重点内容的考核突出,层次分明.试题总体难度设置合理,
随着市场经济的飞速发展,信息化时代的普及,中小企业的信息化重要性就突出来了,而这种变化对中小企业的冲击也越来越大,所以小企业的信息化程度已成为企业成败的关键。所以就
为了探讨案例式立体教学法(CTTM)在教学中的设计与实现效果,本文以《聚合物基复合材料》专业课为教学课程,选取本院2012届学生为实验组对其应用CTTM,另选取2011届为对照组,对其
价值理性恪守"人是万物的尺度",提升人的价值、凸现人存在的意义。教师专业道德应当体现教师专业生活特有的人文追求和人文价值,反映教育工作的责任和义务,并体现社会对教师
以ArcGIS系列软件作为开发平台,Visual Studio作为编程环境,利用面向对象的Visual Basic编程语言,采用B/S模式,开发出风暴潮灾害疏散系统。并利用2011年第17号台风"纳沙"风暴
中学新课程改革实施以来,在语文教学重中之重的作文教学中,不少语文教师的理念更新上存在盲点:认为作文教学无所谓“新旧”,学生作文能力和水平的提高是学生语文能力的“本能反弹
选用竹炭纤维、涤纶纤维和低熔点纤维为原料,设计不同配比开发制备了12组针刺内饰非织造产品。对产品的定量、厚度、透气性、力学性能和摩擦性能进行了测试,并对测试结果进行
选择一片漆黑的背景,从时空穿越而来,然后独自表演,每一个动作都像闪电一样说明一种语言,语言深处有骨头的燃烧和意韵的击撞,那是生命的绝唱。