基于强化学习的无线网络通信计算资源调配理论与方法

来源 :北京邮电大学 | 被引量 : 0次 | 上传用户:dddddddaaaaaaaa
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
当前,移动终端和网络数据流量爆炸式增长,各类新兴业务不断涌现。为应对这些趋势带来的挑战,异构无线网络受到广泛关注。随着边缘计算、人工智能和网络功能虚拟化等技术的发展,未来异构网络将呈现云边协同、内生智能、网络可重构等特征。为充分发挥未来异构网络的性能潜力,本文对其中的资源调配问题进行了深入研究,主要工作和创新包括:针对云边异构无线网络场景,为克服通信、计算和缓存资源紧密耦合导致资源优化问题难求解的挑战,提出了基于联盟博弈和多智能体强化学习的多维资源联合调配方法。首先,对云边异构网络中考虑业务缓存的计算卸载场景进行了建模,接着考虑到缓存资源相比通信和计算资源在更大的时间尺度上进行调整,构建了两时间尺度资源优化问题。其中,在大时间尺度上通过优化业务缓存最小化用户时延的期望和网络缓存成本的加权和,而在小时间尺度上则对通信和计算资源分配进行优化。为求解该问题,提出了固定业务缓存下的基于联盟博弈的通信计算资源调配方法以及基于多智能体强化学习的缓存资源优化方法。后者可克服长期优化问题无显示形式且缓存变量非连续的挑战,实现时延和缓存成本的良好折中。此外,本文对所提方法的复杂度、收敛性和最优性进行了严谨分析,并通过仿真展示了所提方法的优越性以及关键参数对系统性能的影响。针对开放式异构无线网络场景,考虑到软定义基站功能在云边间的划分对网络资源调配具有潜在影响,提出了基于匹配理论和多智能体强化学习的基站功能划分和通信计算资源联合优化方法。首先,考虑到基站功能划分和通信计算资源调配的时间尺度差异性,构建了两时间尺度优化问题,其中在小时间尺度上优化通信和计算资源以最小化用户时延和系统能耗的加权和,而在大时间尺度上则对基站功能划分进行优化,目标为最小化用户时延和系统能耗加权和的期望。接着提出了固定基站功能划分下基于匹配理论的低复杂度通信和计算资源调配方法,然后利用多智能体强化学习确定基站功能在云边间的长期划分方案。通过对回报函数的合理设计,该方法可实现对用户动态业务请求和信道状态的自适应。最后,通过仿真展示了灵活开放异构无线网络架构相比纯集中式和纯分布式架构的性能优势。综上,本文针对不同异构网络场景下的资源调配问题进行了研究,提出了强化学习和博弈理论相结合的资源调配方法,为利用机器学习技术提升未来异构网络性能提供了一定的理论基础。
其他文献
松鸣岩花儿是民族融合背景下,多民族民歌融合的产物.羌族民歌是其母体,古鲜卑人民歌、匈奴人民歌、吐蕃人民歌和蒙古族民歌都给它注入了新鲜血液,最终形成了既有忧伤凄婉之风,又有欢快明朗之调的多民族民间音乐艺术.
李建军多年从事文学批评实践,并形成了自有的理论谱系.其文学批评的斗争性与鲁迅的“蔷薇”精神一脉相承,但讲求文体形式的精美与批评本身的温暖表达又和帕乌斯托夫斯基有些类似.同时,他的批评思想的复杂性也有待于深入研究.他既信服经典的参照性,又质疑那些“症候性经典”.他既注重对当代作家作品进行伦理批评,又强调不能只以伦理为唯一评判标准.他既有独立于作品之外的理性思辨,又时常被文学精神所缚.李建军批评始终指向三大问题:一是经典体系的建构与传承,二是批评场域的良性运行,三是建构伟大作家的文格与品格.从批评内容、批评方
李建军的文学批评相较于当代其他文学批评家,有四个鲜明的特点:一是在文学批评标准上,坚持“肯定指向”.他通过对作品人物和作家态度的的肯定性指向的发现与揭示,来宣扬文学作品中有可能被转化成的积极力量和有可能被升华成真正人性的东西.二是坚持说真话的批评律令.李建军在与作家作品之间进行的思想交锋、观点碰撞和审美沟通都体现了可贵的求真精神.三是在文本细读上,肯下“笨”功夫.李建军的文学批评用事实说话,用数字说话,用细节说话,其文学感受细腻而敏锐.四是批评语言雅驯蕴藉,既古典纯净,又优美灵动.因而,李建军的文学批评呈
王梵志诗中有部分涉及死亡的诗句被解读为梵志诗“忧生乐死”思想的反映,学者多认为这是受现实苦难压迫而展现出的一种反常思维.作为“菩萨示化”的王梵志为引导众生脱离苦海,故以“念死”这样的激切之法为接引众生之方便,显示出一位“大修行人”的渡世之心和通达之智.以王梵志诗为依据,通过对王梵志佛教身份和地位的简要分析,从佛教本位的角度阐释其“忧生乐死观”产生的原因和劝世度人的根本目的.
莫言的近作《晚熟的人》是一部“回归”和“致敬”的作品.在这部中短篇小说集中,莫言重新返回到了“典型环境中的典型人物”的创作方法上,小说的叙事结构、人物设置以及整体精神特征又颇具有鲁迅小说的影子,表现出和鲁迅超越时代的交叠性.但历经各种现代主义和后现代主义思潮和方法深刻影响的莫言,又表现出和鲁迅的明显分殊,这种分殊在本质上并非由于小说表现时代的不同,也不是源于小说所诞生时代的差异,更多的是两个作家不同的审美趋向和对小说艺术的不同追求.
影像见证历史,同时,作为新时代共同体叙事的中国民族影视可以传承民族基因,塑造情感结构,重铸民族性格.以影视资源辅助教学,有利于在高校铸牢中华民族共同体意识,在新文科建设背景下,利用影像叙事可以促进专业优化,夯实课程体系,更好地实现文科教育的价值导向性.
李建军以宏观与微观的多重视角,从自我的小说阅读与批评经验出发,探讨了小说修辞的主体关系、宏观修辞(视点与控制)、微观修辞(反讽与象征)、小说修辞效果及小说修辞病象分析等技术性分析,体现了修辞理论建构体系的本土革命性实践.他在《小说修辞研究》中不仅强调了修辞内在的和谐性、审美原则及联动,传达了修辞对精神意义的承担与创造,而且探索了抵达哲学之美境界的路径.
近年来,随着移动互联网、物联网及工业应用的蓬勃发展,以及跨领域信息通信技术融合创新的不断深入,移动通信网络将承载数以千倍计的数据流量增长和千亿数量级的设备联网需求。第五代移动通信(The Fifth Generation,5G)网络引入移动边缘计算架构、网络虚拟化、超密集组网等新技术,实现体验速率、能效、连接密度、时延等性能全面提升。移动边缘计算技术(Mobile Edge Computing,M
位于微波波段和可见光波段之间的太赫兹电磁波,兼顾光子学和电子学的双重特点使得它在目标检测、超宽带高速无线通信以及成像等方面具有其他波段不可比拟的优势。但它具有光波和电磁波的双重特性,因此并不完全适用某单一理论的研究。传统的太赫兹研究往往基于太赫兹器件,具有配置结构复杂,体积庞大,工作效率低,不利于集成化和系统化等缺点,限制了太赫兹波在集成电路、通信等方面的应用。而具有二维平面结构的超表面可以在亚波
人民性是中国共产党领导的中国金融的核心属性,也是中国金融快速发展的制胜法宝.文章从人民金融发展的历史脉络入手,提练了人民金融思想,考察了人民金融思想形成发展的五大动力,并从构建新发展格局、促进共同富裕和防范化解金融风险三个视角分析了人民金融思想的时代价值.