数学规划 (最速下降法,c语言编程).doc

数 学 规 划 课 程 设 计

题目：用最速下降法求解无约束非线性规划问题

姓名：

学号：

成绩：

2011年6月

用最速下降法求解无约束非线性规划问题

摘要：无约束非线性规划问题是一类重要的数学规划问题。文主要研究了用最速下降法也就是梯度法对无约束非线性规划问题进行求解。对于一个无约束非线性规划利用最速下降法求解，首先需要确定其优化方向，此优化方向应该选择为f在当前点处的负梯度方向，利用一维搜索法找出沿此方向上的最小值及其对应点，此后将该点作为新的出发点重复上述过程，直到达到允许的误差为止。本文最后利用c++语言编程得到满足允许误差内的最优解。

本文主要对一个无约束非线性规划问题的实例，首先利用上述迭代的方法，计算出各迭代点的函数值，梯度及其模。然后应用c++语言编程，得到精确地最优解，需迭代六次才使得，得到的最优解为，。

关键词：最速下降法 无约束非线性规划 最优解

一、问题重述

用最速下降法求解无约束非线性规划问题：，设初始点取为,迭代到满足允许误差=0.01为止的精确解。

二、问题分析

2.1 无约束非线性问题的最优条件

该问题是一个无约束非线性规划问题，利用最少下降法求解该问题，无约束非线性规划问题的最优解所要满足的必要条件和充分条件是我们设计算法的依据，为此有以下几个定理。

定理1 设f：在点处可微，若存在，使，则向量p是f在点处的下降方向。

定理2设f：在点处可微，若是无约束问题的局部最优解，则

有数学分析中我们已经知道，使的点x为函数f的驻点或平稳点。函数f的一个驻点可以是极小值点；也可以是极大值点；甚至也可能既不是极小值点也不是极大值点，因此称它为函数f的鞍点，以上定理告诉我们，是无约束问题的局部最优解的必要条件是：是其目标函数f的驻点。

定理3 设f：在点处的Hesse矩阵存在，若，并且正定，则是无约束非线性问题的严格局部最优解。

一般而言，无约束非线性问题的目标函数的驻点不一定是无约束非线性问题的最优解，但对于其目标函数是凸函数的无约束凸规划，下面定理证明了它的目标函数的驻点就是它的整体最优解。

定理4设f：，，f是上的可微凸函数。若有，则是无约束问题的整体最优解。

2.2最速下降法的基本思想

最速下降法又称为梯度法，是1847年由著名数学家Cauchy给出的，他是解析法中最古老的一种，其他解析方法或是他的变形，或是他的启发得到的，因此它是最优化方法的基础。

设无约束非线性规划问题中的目标函数f：在点处可微。最速下降法的基本思想是：从当前点出发，取函数在点处下降最快的方向作为我们收索方向，由的Taylor展示知 ，略去的高阶无穷小项不计，可见取时，函数值下降的最多 ，于是，我们可以够造出最速下降法的迭代步骤。

2.3无约束非线性规划问题的迭代步骤

解无约束非线性规划问题的最速下降法计算步骤

第1步 选取初始点，给定终止误差 >0，令k=0；

第2步 计算，若，停止迭代，输出，否则进行第3步；

第3步 取；

第4步 进行一维搜索，求，使得，令，k=k+1。转第2步。

由以上计算步骤可知，最速下降法迭代终止时，求得的是目标函数驻点的一个近似点。

三、问题求解

3.1对原无约束非线性规划迭代

首先进行第一次迭代

则

令，即=0，解得：

所以，

此时，

又因为

则进行第二次迭代

则

令，代入即可解得：

所以

此时，

又因为

则进行第三次迭代

则

令，代入即可解得：

所以

此时，

又因为

则进行第四次迭代

则

令，代入即可解得：

所以

此时，

又因为

以上仍然没有达到要求，即还需继续迭代，直到满足为止。

3.2对原无约束非线性规划进行c++语言编程求解

就这样无限的迭代下去，直到为止，为此，我们可以用c++语言编程得到，其算法设计如下图(图3-1)

图(3-1)

利用c++语言编程(源代码如下)：

#include

#include

double lambda(double x[2],double p[2],double a[2])

{

double lam1,lam2;

lam1=4*(pow(a[0],3)*x[0]*x[0]+pow(a[1],3)*x[1]*x[1]);

lam2=-4*(pow(a[0]*x[0],2)+pow(a[1]*x[1],2))