Autonomous maneuver decision-making for a UCAV in short-range aerial combat based on an MS-DDQN algo

来源 :null | 被引量 : 0次 | 上传用户:wzy4225
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
To solve the problem of realizing autonomous aerial combat decision-making for unmanned combat aerial vehicles(UCAVs) rapidly and accurately in an uncertain environment, this paper proposes a decision-making method based on an improved deep reinforcement learning(DRL) algorithm: the multistep double deep Q-network(MS-DDQN) algorithm. First, a six-degree-of-freedom UCAV model based on an aircraft control system is established on a simulation platform, and the situation assessment functions of the UCAV and its target are established by considering their angles, altitudes, environments, missile attack performances, and UCAV performance. By controlling the flight path angle, roll angle, and flight velocity, 27 common basic actions are designed. On this basis, aiming to overcome the defects of traditional DRL in terms of training speed and convergence speed, the improved MS-DDQN method is introduced to incorporate the final return value into the previous steps. Finally, the pre-training learning model is used as the starting point for the second learning model to simulate the UCAV aerial combat decision-making process based on the basic training method, which helps to shorten the training time and improve the learning efficiency. The improved DRL algorithm significantly accelerates the training speed and estimates the target value more accurately during training, and it can be applied to aerial combat decision-making.
其他文献
目的 研究中医古籍中黄连-吴茱萸药对的用药规律。方法 基于数据库《中华医典·名方》检索历代方剂中包括黄连-吴茱萸药对的古籍文献,根据纳排标准进行筛选,并通过古今医案云平台网站进行分析。结果 收集符合筛选要求的原文264条,涉及中药233味,药性以温、寒、热为主,药味以辛、苦、甘较多,主要归脾经,主治疾病共44种,频次最高的为泄泻(23.87%)积聚和(21.97%),其次为痢疾(10.98%)、吐
随着城市化进程的不断加快,隧道工程的建设数量逐年增加,这对于促进当地经济发展十分有益。在工程建设数量不断增加的基础上,施工单位也需要加大对环境的保护和重视建设标准的提高。就隧道工程而言,一旦在实际施工的过程中遇到不良地质,必须要采取相应的应对措施,只有这样才能使隧道工程的建设质量和施工安全得到充分的保障,使道路行业的建设和发展得到促进。
汉语国际教育文化教材对传播中国文化、提高学习者的汉语水平都具有非常重要的意义。在汉语国际教育70多年的发展过程中,汉语文化教材的发展可以分为五个时期:萌芽期、起步期、发展期、高峰期和稳定期。在发展过程中存在一些问题,比如,精品文化教材比例小,针对性不强,传统文化没有注重其传承性,立体化教材流于形式等。要解决这些问题,就要加快文化大纲建设,注重传统文化与现代生活的结合,继续开发立体化教材,强化地域性
一名合格的高校思政教育工作者,不仅要把握好思政教育的主渠道,还要在深刻认识思政教育规律的基础上,充分抓住并用好新机遇,致力于提高思政教育工作的实效。而新媒体环境下短视频的出现,为思政教育工作提供了新的资源和载体,它不仅让生于网络信息时代的大学生们喜闻乐见,也使得思政教育工作变得“活”起来。文章以短视频和思政教育为研究对象,列举了短视频在思政教育工作中的优势,剖析了短视频在高校思政教育工作中存在的问
当前,锂离子电池主要使用的聚烯烃类隔膜存在电解液浸润性和热稳定性差的问题,且主要来源于不可再生的化石原料,难以满足高性能锂离子电池绿色低碳发展的需要。纤维素作为天然高分子材料,极性强、结构稳定性好,既具有电解液润湿性好和热稳定性强的优点,又具有来源广泛、储量丰富、可再生降解的优势。因此,纤维素具有制备新一代锂离子电池隔膜的潜力。然而,基于普通造纸用纤维素纤维的隔膜存在孔径大、强度低等问题;而由较小
目的 探讨舒适护理对电子支气管镜下介入治疗肺结核患者应对方式的影响。方法 选取2020年1月至2022年6月在山东省公共卫生临床中心行电子支气管镜检查的330例肺结核患者为研究对象。随机分为两组。对照组165例患者给予常规护理,观察组165例患者给予舒适护理。(1)生活舒适度:采用综合康力问卷(GCQ)评价患者的护理前和舒适度。(2)记录术后并发症情况(包括喉水肿、胸痛、呕吐、恶心、咯血等)。(3
装配式管线系统通常铺设于地表,距离长且面临的情况复杂,在管道输送过程中会受外力作用产生移位现象,需要一种方法准确检测移位情况是否影响输送安全。分析管线移位的受力特点,提出了一种通过巡检无人机所采集的图像资料计算移位管段弯曲失度的数学模型,运用VC++语言开发功能性模块,实现了管线移位情况的量化检测和智能预警。实验证明,该方法相较于传统判别方式能够更快、更准地检查管段安全隐患,提升管道输送的智能化水
<正>5月中旬,归侨何晋励先生手拿锦旗、怀揣感谢信,先后来到省人大常委会华侨外事工委和乐东县人大常委会表示谢意,称赞两级人大是“维护归侨权益的坚强后盾”、“归侨的贴心人”。原来,是省人大华侨外事工委和乐东县人大采取得力的监督措施,加大监督的力度,使一宗久拖二十多年的涉侨案件得到了切实的解决,受到人民群众的好评。
期刊
随着社会经济的快速发展,各品牌之间的竞争压力逐渐增大,为了能在激烈的市场竞争中脱颖而出,各品牌需要不断优化产品的功能,还需要加强品牌包装设计。提高品牌包装设计质量,可以在设计中应用传统文化元素,借助传统文化元素多样形式,提高品牌包装设计的视觉传达效果,同时提升其文化韵味,从而提升消费者对品牌包装的品味感。主要分析了传统文化元素在品牌包装设计中的应用意义,并总结了几种不同的传统文化元素在品牌包装设计