几种非线性共轭梯度法的算法研究及全局收敛性分析

来源 :重庆大学 | 被引量 : 0次 | 上传用户:hanyancuiceo
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
最优化问题分为无约束和有约束两种。而通常有约束最优化问题,从‘转化’的角度而言,常可以转化为无约束优化问题,所以无约束最优化问题是重要的基础和手段对于优化问题来讲。非线性共轭梯度法是一种常用的能够有效解决大型无约束最有化问题的方法,在社会科学、自然科学、生产实际、和现代化管理中有着广泛应用。   本课题是在国内外已有研究成果的基础上,经过仔细分析、推敲、验证,对非线性共轭梯度法选择适宜的搜索条件和改进的参数,构造新的搜索方向,得到新的算法。新方法是在前人成果的基础上,进行了拓展研究。   本课题对近年来备受关注的共轭梯度算法进行了深入剖析,得到了以下一些成果:   1.在PRP共轭梯度方法的基础上,提出的PRP新算法具有充分下降性和在无任何线搜索下搜索方向自动保持可行性,而且该算法也具有很好的收敛性,表现在非凸函数和一致凸函数上。   2.在Liu-Storey(LS)公式的基础上给出了一个修正的共轭梯度公式。该新公式在Wolfe-Powell 线搜索下,甚至在强Wolfe-Powell 线搜索下,同时在满足时,新算法具有充分下降性和全局收敛性。数值实验结果展现了算法的可行性。   3. 通过联立共轭梯度法和谱梯度法,提出一种新非线性修正的谱CD共轭梯度方法。由该方法得到的搜索方向对于目标函数而言是很好的下降方向,这一性质既不受线搜索规则的影响,也不受目标函数的凸性影响。而且该修正的方法在精确线搜索条件下,能诱导出标准的CD共轭梯度方法。同时得到了在线搜索规则下新方法的全局收敛性,初步数值实验结果显示了算法的可行性。   4.在前人提出的方法基础上了,构建了一种MWYL算法,该算法具有(*)性且在强Wolfe-Powell 线搜索下,算法全局收敛,数值实验效果远远好于PRP+方法。
其他文献
一个有序对G=(V,E)称为一个无向图,其中V和E一般是有限集.V中的元素称为图G的顶点,E是由V中不同元素的无序对组成的集合,E中的元素称为图G的边.通常用V(G)和E(G)来表示图G的顶点
本文包含三个部分。第一部分回顾了有理插值存在性研究的历史发展沿革。   第二部分研究了型值点的位置与有理插值存在性的关系:给定m+2个型值点,通过对型值点几何分布的分
为了给当今有需要的大学生提供及时的心理服务,给心理相关专业的学生提供较好的实践平台,以及为了深入地对积极心理学n进行探索,在学校和一些社区开展“好心情加油站”活动,并通
粒子群优化(Particle Swarm Optimization, PSO)算法是一种较新的全局优化方法。与遗传算法、蚁群算法等大多数进化计算方法一样,PSO算法也是一类基于群体智能的随机优化算法
<正>会理县现有石榴面积1.93万hm2,产量34万t,产值13.12亿元,带动二、三产业8.5亿元,是全国八大石榴产区之首,所产石榴享誉川内外,开发出了石榴盆景、石榴酒、石榴饮料等系列
广义随机系数自回归模型是重要的非线性时间序列模型,利用该模型在拟合众多的动态的经济、社会及自然等现象时效果较好.关于该模型的性质和参数估计的相关问题一直是研究的热
样本分类是数据挖掘一项非常重要的任务,在众多分类方法和理论中,贝叶斯分类方法具有坚实的统计理论基础,其简单形式是朴素贝叶斯方法(NBC模型),由于具有简单快速的计算过程及泛
本文通过对荣华二采区10
在本文中,我们主要研究学习理论中关于回归,流形学习和数据分析的一些算法。我们将详细地讨论这些算法的设计,并从逼近论的观点讨论其渐近性质。   论文的第一部分,在再生核Hi
传染病动力学分析是生物数学模型研究中必不可少的一部分。随着智能手机与社交网络的发展,信息传播影响传染病的作用越来越明显,而人类的体质以及环境的波动都会对传染病的流行