最优控制理论课件资料

1/9/20231现代控制理论1/8/20231现代控制理论最优控制理论东北大学信息科学与工程学院井元伟教授二○○九年十一月1/9/20232最优控制理论东北大学信息科学与工程学院二○○九年十一月1/8第2章求解最优控制的变分方法第3章最大值原理第4章动态规划第5章线性二次型性能指标的最优控制第6章快速控制系统第1章最优控制问题1/9/20233第2章求解最优控制的变分方法第3章最大值原理第最优控制理论现代控制理论的重要组成部分20世纪50年代发展形成系统的理论研究的对象

控制系统中心问题

给定一个控制系统，选择控制规律，使系统在某种意义上是最优的统一的、严格的数学方法最优控制问题研究者的课题，工程师们设计控制系统时的目标最优控制能在各个领域中得到应用，效益显著1/9/20234现代控制理论最优控制理论现代控制理论的重要组成部分1/8/2021.1两个例子1.2问题描述第1章最优控制问题1/9/20235现代控制理论1.1两个例子第1章最优控制问题1/8/20235现最优控制问题1.1两个例子

例1.1飞船软着陆问题

1/9/20236现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

1/9/20237现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

1/9/20238现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

初始状态

1/9/20239现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

初始状态

终点条件

1/9/202310现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

初始状态

终点条件

控制目标1/9/202311现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

初始状态

终点条件

控制目标推力方案1/9/202312现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题例1.2导弹发射问题1/9/202313现代控制理论最优控制问题例1.2导弹发射问题1/8/202313现最优控制问题例1.2导弹发射问题1/9/202314现代控制理论最优控制问题例1.2导弹发射问题1/8/202314现最优控制问题例1.2导弹发射问题1/9/202315现代控制理论最优控制问题例1.2导弹发射问题1/8/202315现最优控制问题例1.2导弹发射问题初始条件

1/9/202316现代控制理论最优控制问题例1.2导弹发射问题初始条件1/8/20

最优控制问题例1.2导弹发射问题初始条件

末端约束

1/9/202317现代控制理论最优控制问题例1

最优控制问题例1.2导弹发射问题初始条件

末端约束

指标

1/9/202318现代控制理论最优控制问题例1

最优控制问题例1.2导弹发射问题初始条件

末端约束

指标

控制1/9/202319现代控制理论最优控制问题例1最优控制问题1.2问题描述(1)状态方程一般形式为1/9/202320现代控制理论最优控制问题1.2问题描述(1)状态方程一般形式为

最优控制问题1.2问题描述(1)状态方程一般形式为1/9/202321现代控制理论最优控制问题1.最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量1/9/202322现代控制理论最优控制问题1.2问题描述(1)状态方程一般形式为

最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量为r维控制向量1/9/202323现代控制理论最优控制问题1.最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量为r维控制向量为n维向量函数1/9/202324现代控制理论最优控制问题1.2问题描述(1)状态方程一般形式为

最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量为r维控制向量为n维向量函数给定控制规律1/9/202325现代控制理论最优控制问题1.最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量为r维控制向量为n维向量函数给定控制规律满足一定条件时，方程有唯一解1/9/202326现代控制理论最优控制问题1.2问题描述(1)状态方程一般形式为

最优控制问题(2)容许控制1/9/202327现代控制理论最优控制问题(2最优控制问题(2)容许控制：1/9/202328现代控制理论最优控制问题(2)容许控制：1/8/202328现代控制

最优控制问题(2)容许控制：1/9/202329现代控制理论最优控制问题(2最优控制问题(2)容许控制：有时控制域可为超方体

1/9/202330现代控制理论最优控制问题(2)容许控制：有时控制域可为超方体1/8

最优控制问题(2)容许控制：有时控制域可为超方体

1/9/202331现代控制理论最优控制问题(2最优控制问题(3)目标集1/9/202332现代控制理论最优控制问题(3)目标集1/8/202332现代控制理论最优控制问题(3)目标集1/9/202333现代控制理论最优控制问题(3)目标集1/8/202333现代控制理论

最优控制问题(3)目标集n维向量函数1/9/202334现代控制理论最优控制问题(3最优控制问题(3)目标集固定端问题

n维向量函数1/9/202335现代控制理论最优控制问题(3)目标集固定端问题n维向量函数1/8最优控制问题(3)目标集固定端问题

自由端问题

n维向量函数1/9/202336现代控制理论最优控制问题(3)目标集固定端问题自由端问题n维向量

最优控制问题(4)性能指标1/9/202337现代控制理论最优控制问题(4最优控制问题(4)性能指标1/9/202338现代控制理论最优控制问题(4)性能指标1/8/202338现代控制理最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标1/9/202339现代控制理论最优控制问题(4)性能指标对状态、控制以及终点状态的要求

最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标1/9/202340现代控制理论最优控制问题(4最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标积分型性能指标，表示对整个状态和控制过程的要求

1/9/202341现代控制理论最优控制问题(4)性能指标对状态、控制以及终点状态的要求

最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标积分型性能指标，表示对整个状态和控制过程的要求

1/9/202342现代控制理论最优控制问题(4最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标积分型性能指标，表示对整个状态和控制过程的要求

终点型指标，表示仅对终点状态的要求1/9/202343现代控制理论最优控制问题(4)性能指标对状态、控制以及终点状态的要求

2.1泛函与变分法基础2.2欧拉方程2.3横截条件2.4含有多个未知函数泛函的极值2.5条件极值2.6最优控制问题的变分解法第2章求解最优控制的变分方法1/9/202344现代控制理论第2章求解最

求解最优控制的变分方法2.1泛函与变分法基础平面上两点连线的长度问题

1/9/202345现代控制理论求解最优控制的变

求解最优控制的变分方法2.1泛函与变分法基础平面上两点连线的长度问题

1/9/202346现代控制理论求解最优控制的变

求解最优控制的变分方法2.1泛函与变分法基础平面上两点连线的长度问题

一般来说，曲线不同，弧长就不同，即弧长依赖于曲线，记为1/9/202347现代控制理论求解最优控制的变

求解最优控制的变分方法2.1泛函与变分法基础平面上两点连线的长度问题

一般来说，曲线不同，弧长就不同，即弧长依赖于曲线，记为称为泛函

称为泛函的宗量

1/9/202348现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释1/9/202349现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释1/9/202350现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释宗量的变分1/9/202351现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释宗量的变分泛函的增量1/9/202352现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释宗量的变分泛函的增量泛函的变分1/9/202353现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释连续泛函

宗量的变分趋于无穷小时，泛函的变分也趋于无穷小线性泛函

泛函对宗量是线性的宗量的变分泛函的增量泛函的变分1/9/202354现代控制理论求解最优控制的变

求解最优控制的变分方法定理2.2若泛函有极值，则必有上述方法与结论对多个未知函数的泛数同样适用

1/9/202355现代控制理论求解最优控制的变分方法定理2.2若泛函有极值，则必

求解最优控制的变分方法2.6最优控制问题的变分解法2.6.4终值时间自由的问题2.6.3末端受限问题2.6.2固定端问题2.6.1自由端问题1/9/202356现代控制理论求解最优控制的变求解最优控制的变分方法2.6.1自由端问题约束方程新的泛函令有哈米顿函数

1/9/202357现代控制理论求解最优控制的变分方法2.6.1自由端问题约束方程新

求解最优控制的变分方法进行变分令有伴随方程

必要条件1/9/202358现代控制理论求解最优控制的变

求解最优控制的变分方法例2.5

哈米顿函数伴随方程边界条件必要条件1/9/202359现代控制理论求解最优控制的变

求解最优控制的变分方法最优控制代入状态方程并求解令1/9/202360现代控制理论求解最优控制的变求解最优控制的变分方法2.6.2固定端问题性能指标分部积分进行变分令变分为零1/9/202361现代控制理论求解最优控制的变分方法2.6.2固定端问题性能指标分

求解最优控制的变分方法边界条件指标泛函例2.6考虑如下系统的终端固定的最优控制问题，求取最优控制和最优状态曲线，使指标泛函J取得极小值。

系统的状态方程：1/9/202362现代控制理论求解最优控制的变

求解最优控制的变分方法哈米顿函数伴随方程由状态方程代入初始和终端条件，可求得1/9/202363现代控制理论求解最优控制的变

求解最优控制的变分方法4.考虑如下系统的终端固定的最优控制问题，求取最优控制和最优状态曲线，使指标泛函J取得极小值。系统的状态方程为：其边界条件为：其指标泛函为：1/9/202364现代控制理论求解最优控制的变

求解最优控制的变分方法哈米顿函数伴随方程1/9/202365现代控制理论求解最优控制的变

求解最优控制的变分方法1/9/202366现代控制理论求解最优控制的变

求解最优控制的变分方法2.6.3末端受限问题新的泛函变分1/9/202367现代控制理论求解最优控制的变分方求解最优控制的变分方法必要条件1/9/202368现代控制理论求解最优控制的变分方法必要条件1/8/202368现代控

求解最优控制的变分方法2.6.4终值时间自由的问题T有时是可变的，是指标泛函，选控制使有T极小值变分1/9/202369现代控制理论求解最优控制的变

求解最优控制的变分方法必要条件1/9/202370现代控制理论求解最优控制的变

求解最优控制的变分方法例2.7

指标泛函哈米顿函数伴随方程必要条件1/9/202371现代控制理论求解最优控制的变

3.1古典变分法的局限性3.2最大值原理3.3变分法与极大值原理第3章最大值原理1/9/202372现代控制理论第3章最大值原

最大值原理3.1古典变分法的局限性u(t)受限的例子例3.1伴随方程极值必要条件矛盾!!1/9/202373现代控制理论最大值原理3.1

最大值原理3.2最大值原理定理3.1(最小值原理)设为容许控制，为对应的积分轨线，为使为最优控制，为最优轨线，必存在一向量函数，使得和满足正则方程且1/9/202374现代控制理论最大值原理3.2

最大值原理最小值原理只是最优控制所满足的必要条件。但对于线性系统最小值原理也是使泛函取最小值得充分条件。1/9/202375现代控制理论最大值原理最小值原理只

最大值原理例3.2重解例3.1哈密顿函数伴随方程由极值必要条件，知又于是有1/9/202376现代控制理论最大值原理例3.2

最大值原理协态变量与控制变量的关系图

1/9/202377现代控制理论最大值原理协态变量与

最大值原理例3.3

性能指标泛函哈密顿函数伴随方程1/9/202378现代控制理论最大值原理例3.3

最大值原理上有1/9/202379现代控制理论最大值原理上有1/

最大值原理协态变量与控制变量的关系图

整个最优轨线1/9/202380现代控制理论最大值原理协态变量与最大值原理例3.4

把系统状态在终点时刻转移到性能指标泛函终点时刻是不固定的哈米顿函数伴随方程1/9/202381现代控制理论最大值原理例3.4把系统状态在终点时刻转移到性能指标泛函

最大值原理H是u的二次抛物线函数，u在上一定使H有最小值，可能在内部，也可能在边界上。最优控制可能且只能取三个值

此二者都不能使状态变量同时满足初始条件和终点条件1/9/202382现代控制理论最大值原理H是u的二最大值原理最优控制最优轨线最优性能指标1/9/202383现代控制理论最大值原理最优控制最优轨线最优性能指标1/8/2023

最大值原理例3.5

使系统以最短时间从给定初态转移到零态哈米顿函数伴随方程1/9/202384现代控制理论最大值原理例3.5

最大值原理最优控制切换及最优轨线示意图1/9/202385现代控制理论最大值原理最优控制切

最大值原理3.3古典变分法与最小值原理古典变分法适用的范围是对u无约束，而最小值原理一般都适用。特别当u不受约束时，条件就等价于条件1/9/202386现代控制理论最大值原理3.34.1多级决策过程与最优性原理4.2离散系统动态规划4.3连续系统动态规划4.4动态规划与最大值原理的关系第4章动态规划1/9/202387现代控制理论第4章动态规划1/8/202387现代控制理论

动态规划

动态规划是求解最优控制的又一种方法，特别对离散型控制系统更为有效，而且得出的是综合控制函数。这种方法来源于多决策过程，并由贝尔曼首先提出，故称贝尔曼动态规划。1/9/202388现代控制理论动态规划动态规划动态规划4.1多级决策过程与最优性原理作为例子，首先分析最优路径问题(a)(b)(c)试分析(a),(b)和(c)三种情况的最优路径，即从走到所需时间最少。规定沿水平方向只能前进不能后退。1/9/202389现代控制理论动态规划4.1多级决策过程与最优性原理作为例子，首先分析最

动态规划(a)中只有两条路径，从起点开始，一旦选定路线，就直达终点，选最优路径就是从两条中选一条，使路程所用时间最少。这很容易办到，只稍加计算，便可知道，上面一条所需时间最少。(b)共有6条路径可到达终点，若仍用上面方法，需计算6次，将每条路线所需时间求出，然后比较，找出一条时间最短的路程。(c)需计算20次，因为这时有20条路径，由此可见，计算量显著增大了。1/9/202390现代控制理论动态规划(a)中只有动态规划逆向分级计算法

逆向是指计算从后面开始，分级是指逐级计算。逆向分级就是从后向前逐级计算。以(c)为例从倒数第一级开始，状态有两个，分别为和在处，只有一条路到达终点，其时间是；在处，也只有一条，时间为1。后一条时间最短，将此时间相应地标在点上。并将此点到终点的最优路径画上箭头。1/9/202391现代控制理论动态规划逆向分级计算法逆向是指计算从后面开始，分级是指

动态规划然后再考虑第二级只有一种选择，到终点所需时间是有两条路，比较后选出时间最少的一条，即4+1=5。用箭头标出也标出最优路径和时间依此类推，最后计算初始位置求得最优路径最短时间为131/9/202392现代控制理论动态规划然后再考虑第动态规划最优路径示意图

1/9/202393现代控制理论动态规划最优路径示意图1/8/202393现代控制理论动态规划5.利用逆向分级计算法求解如下的最优路径问题从倒数第一级开始，状态有两个，分别为和在处，只有一条路到达终点，其时间是；在处，也只有一条，时间为3。后一条时间最短，将此时间相应地标在点上。并将此点到终点的最优路径画上箭头。1/9/202394现代控制理论动态规划5.利用逆向分级计算法求解如下的最优路径问题从倒

动态规划然后再考虑第二级，亦即倒数第二级只有一种选择，到终点所需时间是有两条路，比较后选出时间最少的一条，即2+4=6。用箭头标出也标出最优路径和时间3+3=6

1/9/202395现代控制理论动态规划然后再考虑第

动态规划然后再考虑第一级，亦即倒数第三级有两种选择，到终点所需时间是分别是，保留前者有两条路，比较后选出时间最少的一条，即2+(2+4)=8和2+(3+3)=8。用箭头标出。1/9/202396现代控制理论动态规划然后再考虑第

动态规划最后再考虑第一级，亦即倒数第四级有两种选择，到终点所需时间是分别是或2+(2+3+3)=10。于是，最短路经有3条，时间为10。求得最优路径1/9/202397现代控制理论动态规划最后再考虑第

动态规划多级过程

多级决策过程

目标函数

控制目的

选择决策序列使目标函数取最小值或最大值实际上就是离散状态的最优控制问题

1/9/202398现代控制理论动态规划多级过程多动态规划最优性原理在一个多级决策问题中的最优决策具有这样的性质，不管初始级、初始状态和初始决策是什么，当把其中任何一级和状态做为初始级和初始状态时，余下的决策对此仍是最优决策。1/9/202399现代控制理论动态规划最优性原理在一个多级决策问题中的最优决策具有这

动态规划指标函数多是各级指标之和，即具有可加性最优性原理的数学表达式1/9/2023100现代控制理论动态规划指标函数多是

动态规划4.2离散系统动态规划阶离散系统性能指标求决策向量使有最小值（或最大值），其终点可自由，也可固定或受约束。1/9/2023101现代控制理论动态规划4.2离散

动态规划引进记号应用最优性原理可建立如下递推公式贝尔曼动态规划方程

1/9/2023102现代控制理论动态规划引进记号应

动态规划例4.2设一阶离散系统，状态方程和初始条件为性能指标求使有最小值的最优决策序列和最优轨线序列指标可写为1/9/2023103现代控制理论动态规划例4.2设

动态规划代入上一级1/9/2023104现代控制理论动态规划代入上一级

动态规划代入状态方程最优决策序列最优轨线1/9/2023105现代控制理论动态规划代入状态方程

动态规划4.3连续系统的动态规划性能指标目标集引进记号根据最优性原理及1/9/2023106现代控制理论动态规划4.3连续

动态规划1/9/2023107现代控制理论动态规划1/8/20

动态规划由泰勒公式，得由中值定理，得1/9/2023108现代控制理论动态规划由泰勒公式，

动态规划连续型动态规划方程

实际上它不是一个偏微分方程，而是一个函数方程和偏微分方程的混合方程1/9/2023109现代控制理论动态规划连续型动态规

动态规划满足连续型动态规划方程，有设边界条件动态规划动态规划方程是最优控制函数满足的充分条件；解一个偏微分方程；可直接得出综合函数；动态规划要求有连续偏导数最大值原理最大值原理是最优控制函数满足的必要条件；解一个常微分方程组；最大值原理则只求得。1/9/2023110现代控制理论动态规划满足连续型动

动态规划例4.3一阶系统性能指标动态规划方程右端对u求导数，令其导数为零，则得1/9/2023111现代控制理论动态规划例4.3

动态规划4.4动态规划与最大值原理的关系

变分法、最大值原理和动态规划都是研究最优控制问题的求解方法，很容易想到，若用三者研究同一个问题，应该得到相同的结论。因此三者应该存在着内在联系。变分法和最大值原理之间的关系前面已说明，下面将分析动态规划和最大值原理的关系。可以证明，在一定条件下，从动态规划方程能求最大值原理的方程。

1/9/2023112现代控制理论动态规划4.4动态

动态规划动态规划方程令哈米顿函数最大值原理的必要条件1/9/2023113现代控制理论动态规划动态规划方程

5.1问题提出5.2状态调节器5.3输出调节器5.4跟踪问题5.5利用Matlab求解最优控制第5章线性二次型性能指标的最优控制1/9/2023114现代控制理论第5章线性二次

线性二次型性能指标的最优控制

用最大值原理求最优控制，求出的最优控制通常是时间的函数，这样的控制为开环控制。

当用开环控制时，在控制过程中不允许有任何干扰，这样才能使系统以最优状态运行。在实际问题中，干扰不可能没有，因此工程上总希望应用闭环控制，即控制函数表示成时间和状态的函数。

求解这样的问题一般来说是很困难的。

但对一类线性的且指标是二次型的动态系统，却得了完全的解决。不但理论比较完善，数学处理简单，而且在工程实际中又容易实现，因而在工程中有着广泛的应用。1/9/2023115现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制5.1问题提法动态方程指标泛函求使之有最小值此问题称线性二次型性能指标的最优控制问题通常称为综合控制函数1/9/2023116现代控制理论线性二次型性能指标的线性二次型性能指标的最优控制指标泛函的物理意义积分项，被积函数由两项组成，都是二次型。第一项

过程

在控制过程中，实际上是要求每个分量越小越好，但每一个分量不一定同等重要，所以用加权来调整，当权为零时，对该项无要求。第二项

控制能力

能量消耗最小。对每个分量要求不一样，因而进行加权。要求正定，一方面对每个分量都应有要求，否则会出现很大幅值，在实际工程中实现不了；另一方面，在计算中需要有逆存在。指标中的第一项是对点状态的要求，由于对每个分量要求不同，用加权阵来调整。1/9/2023117现代控制理论线性二次型性能指标的最优控制指标泛函的物理意义1/8/202

线性二次型性能指标的最优控制5.2状态调节器5.2.1末端自由问题5.2.2固定端问题5.2.3

的情况状态调节器选择或使系统性能指标有最小值1/9/2023118现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制5.2.1末端自由问题构造哈密顿函数伴随方程及边界条件最优控制应满足代入正则方程1/9/2023119现代控制理论线性二次型性能指标的线性二次型性能指标的最优控制求导1/9/2023120现代控制理论线性二次型性能指标的最优控制求导1/8/2023120现代

线性二次型性能指标的最优控制（矩阵黎卡提微分方程）

边界条件最优控制令最优控制是状态变量的线性函数借助状态变量的线性反馈可实现闭环最优控制对称半正定阵1/9/2023121现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制例5.1

性能指标泛函最优控制黎卡提微分方程1/9/2023122现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制最优轨线的微分方程解最优轨线最优控制

1/9/2023123现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制黎卡提方程的解随终点时间变化的黎卡提方程的解1/9/2023124现代控制理论线性二次型性能指标的线性二次型性能指标的最优控制5.2.2固定端问题指标泛函（设

）采用“补偿函数”法补偿函数惩罚函数边界条件黎卡提方程逆黎卡提方程1/9/2023125现代控制理论线性二次型性能指标的最优控制5.2.2固定端问题指标泛函

线性二次型性能指标的最优控制求导黎卡提方程乘以逆黎卡提方程解逆1/9/2023126现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制5.2.3的情况性能指标无限长时间调节器问题

黎卡提方程边界条件最优控制最优指标1/9/2023127现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制5.2.4定常系统完全可控指标泛函矩阵代数方程最优控制最优指标1/9/2023128现代控制理论线性二次型性能指标的线性二次型性能指标的最优控制例5.2

黎卡提方程1/9/2023129现代控制理论线性二次型性能指标的最优控制例5.2黎卡提方程1/8/2

线性二次型性能指标的最优控制5.3输出调节器指标泛函输出调节器问题状态调节器问题

令1/9/2023130现代控制理论线性二次型性能指标的线性二次型性能指标的最优控制5.4跟踪问题问题的提法

已知的理想输出

偏差量指标泛函寻求控制规律使性能指标有极小值。物理意义

在控制过程中，使系统输出尽量趋近理想输出，同时也使能量消耗最少。1/9/2023131现代控制理论线性二次型性能指标的最优控制5.4跟踪问题问题的提法已知

线性二次型性能指标的最优控制指标泛函哈密顿函数1/9/2023132现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制设并微分1/9/2023133现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制的任意性

最优控制1/9/2023134现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制最优轨线方程

最优性能指标

1/9/2023135现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制例5.3

性能指标

1/9/2023136现代控制理论线性二次型性能指标的

线性二次型性能指标的最优控制最优控制1/9/2023137现代控制理论线性二次型性能指标的线性二次型性能指标的最优控制，最优控制极限解

1/9/2023138现代控制理论线性二次型性能指标的最优控制，最优控制极限解1/8

线性二次型性能指标的最优控制闭环控制系统结构1/9/2023139现代控制理论线性二次型性能指标的

快速控制系统6.1快速控制问题6.2综合问题第6章快速控制系统1/9/2023140现代控制理论快速控制系统第6章

快速控制系统

在实际问题中，经常发生以时间为性能指标的控制问题。

如，当被控对象受干扰后，偏离了平衡状态，希望施加控制能以最短时间恢复到平衡状态。

凡是以运动时间为性能指标的最优控制问题称为最小时间控制。1/9/2023141现代控制理论快速控制系统在实

快速控制系统6.1快速控制问题性能指标

时间上限是可变的从状态转移平衡状态所需时间最短构造哈密顿函数

最小值原理

分段常值函数

1/9/2023142现代控制理论快速控制系统6.1

快速控制系统例6.1有一单位质点，在处以初速度2沿直线运动。现施加一力，，使质点尽快返回原点，并停留在原点上。力简称为控制。若其它阻力不计，试求此控制力。质点运动方程

状态方程哈密顿函数

伴随方程

1/9/2023143现代控制理论快速控制系统例6.1

快速控制系统最优控制

协态变量与控制函数4种情况示意图

1/9/2023144现代控制理论快速控制系统最优控制

快速控制系统相轨线族示意图

开关曲线

1/9/2023145现代控制理论快速控制系统相轨线族

快速控制系统开关曲线

初始状态

最优控制状态方程相轨线

总时间

最优控制

1/9/2023146现代控制理论快速控制系统开关曲线

快速控制系统6.2综合问题

综合是将最优控制函数表示为状态和时间的函数即上例之最优综合控制函数

1/9/2023147现代控制理论快速控制系统6.2

快速控制系统例6.2

求快速返回原点的开关曲线和最优综合控制函数构造哈密顿函数伴随方程

最优控制

1/9/2023148现代控制理论快速控制系统例6.2

快速控制系统最优控制与协态变量的变化情况

控制是“砰砰控制”，除了首尾之外，在和上的停留时间均为1/9/2023149现代控制理论快速控制系统最优控制

快速控制系统备选最优轨线族

两族同心圆方程

1/9/2023150现代控制理论快速控制系统备选最优

快速控制系统相点沿轨线顺时针方向运动，其速度为开关曲线

1/9/2023151现代控制理论快速控制系统相点沿轨

快速控制系统第二段开关曲线

1/9/2023152现代控制理论快速控制系统第二段开

快速控制系统整个开关曲线

1/9/2023153现代控制理论快速控制系统整个开关快速控制系统最优综合控制函数

1/9/2023154现代控制理论快速控制系统最优综合控制函数1/8/2023154现代控制

最优控制理论上世纪50年代初

问题比较简单

二阶定常系统

方法比较特殊借助于几何图形

动态系统的最优化问题乃是一个变分问题

变分法

开集

最优控制问题

闭集

发展变分法

1/9/2023155现代控制理论最优控制理论上世纪

两种方法

庞特里雅金前苏联学者

极大值原理

贝尔曼

美国学者

动态规划

应用在过程控制、国防建设、经济规划、管理

多个分支

分布参数的最优控制、随机最优控制、大系统最优控制以及多方多层次的微分对策和主从对策等

1/9/2023156现代控制理论两种方法庞特里雅金谢谢ThankYou!1/9/2023157现代控制理论谢谢ThankYou!1/8/2023157现代控制理论1/9/2023158现代控制理论1/8/20231现代控制理论最优控制理论东北大学信息科学与工程学院井元伟教授二○○九年十一月1/9/2023159最优控制理论东北大学信息科学与工程学院二○○九年十一月1/8第2章求解最优控制的变分方法第3章最大值原理第4章动态规划第5章线性二次型性能指标的最优控制第6章快速控制系统第1章最优控制问题1/9/2023160第2章求解最优控制的变分方法第3章最大值原理第最优控制理论现代控制理论的重要组成部分20世纪50年代发展形成系统的理论研究的对象

控制系统中心问题

给定一个控制系统，选择控制规律，使系统在某种意义上是最优的统一的、严格的数学方法最优控制问题研究者的课题，工程师们设计控制系统时的目标最优控制能在各个领域中得到应用，效益显著1/9/2023161现代控制理论最优控制理论现代控制理论的重要组成部分1/8/2021.1两个例子1.2问题描述第1章最优控制问题1/9/2023162现代控制理论1.1两个例子第1章最优控制问题1/8/20235现最优控制问题1.1两个例子

例1.1飞船软着陆问题

1/9/2023163现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

1/9/2023164现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

1/9/2023165现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

初始状态

1/9/2023166现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

初始状态

终点条件

1/9/2023167现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

初始状态

终点条件

控制目标1/9/2023168现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题1.1两个例子

例1.1飞船软着陆问题

m

飞船的质量h

高度v

垂直速度g

月球重力加速度常数M

飞船自身质量F

燃料的质量软着陆过程开始时刻t为零

K为常数

初始状态

终点条件

控制目标推力方案1/9/2023169现代控制理论最优控制问题1.1两个例子例1.1飞船软着陆问题最优控制问题例1.2导弹发射问题1/9/2023170现代控制理论最优控制问题例1.2导弹发射问题1/8/202313现最优控制问题例1.2导弹发射问题1/9/2023171现代控制理论最优控制问题例1.2导弹发射问题1/8/202314现最优控制问题例1.2导弹发射问题1/9/2023172现代控制理论最优控制问题例1.2导弹发射问题1/8/202315现最优控制问题例1.2导弹发射问题初始条件

1/9/2023173现代控制理论最优控制问题例1.2导弹发射问题初始条件1/8/20

最优控制问题例1.2导弹发射问题初始条件

末端约束

1/9/2023174现代控制理论最优控制问题例1

最优控制问题例1.2导弹发射问题初始条件

末端约束

指标

1/9/2023175现代控制理论最优控制问题例1

最优控制问题例1.2导弹发射问题初始条件

末端约束

指标

控制1/9/2023176现代控制理论最优控制问题例1最优控制问题1.2问题描述(1)状态方程一般形式为1/9/2023177现代控制理论最优控制问题1.2问题描述(1)状态方程一般形式为

最优控制问题1.2问题描述(1)状态方程一般形式为1/9/2023178现代控制理论最优控制问题1.最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量1/9/2023179现代控制理论最优控制问题1.2问题描述(1)状态方程一般形式为

最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量为r维控制向量1/9/2023180现代控制理论最优控制问题1.最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量为r维控制向量为n维向量函数1/9/2023181现代控制理论最优控制问题1.2问题描述(1)状态方程一般形式为

最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量为r维控制向量为n维向量函数给定控制规律1/9/2023182现代控制理论最优控制问题1.最优控制问题1.2问题描述(1)状态方程一般形式为为n维状态向量为r维控制向量为n维向量函数给定控制规律满足一定条件时，方程有唯一解1/9/2023183现代控制理论最优控制问题1.2问题描述(1)状态方程一般形式为

最优控制问题(2)容许控制1/9/2023184现代控制理论最优控制问题(2最优控制问题(2)容许控制：1/9/2023185现代控制理论最优控制问题(2)容许控制：1/8/202328现代控制

最优控制问题(2)容许控制：1/9/2023186现代控制理论最优控制问题(2最优控制问题(2)容许控制：有时控制域可为超方体

1/9/2023187现代控制理论最优控制问题(2)容许控制：有时控制域可为超方体1/8

最优控制问题(2)容许控制：有时控制域可为超方体

1/9/2023188现代控制理论最优控制问题(2最优控制问题(3)目标集1/9/2023189现代控制理论最优控制问题(3)目标集1/8/202332现代控制理论最优控制问题(3)目标集1/9/2023190现代控制理论最优控制问题(3)目标集1/8/202333现代控制理论

最优控制问题(3)目标集n维向量函数1/9/2023191现代控制理论最优控制问题(3最优控制问题(3)目标集固定端问题

n维向量函数1/9/2023192现代控制理论最优控制问题(3)目标集固定端问题n维向量函数1/8最优控制问题(3)目标集固定端问题

自由端问题

n维向量函数1/9/2023193现代控制理论最优控制问题(3)目标集固定端问题自由端问题n维向量

最优控制问题(4)性能指标1/9/2023194现代控制理论最优控制问题(4最优控制问题(4)性能指标1/9/2023195现代控制理论最优控制问题(4)性能指标1/8/202338现代控制理最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标1/9/2023196现代控制理论最优控制问题(4)性能指标对状态、控制以及终点状态的要求

最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标1/9/2023197现代控制理论最优控制问题(4最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标积分型性能指标，表示对整个状态和控制过程的要求

1/9/2023198现代控制理论最优控制问题(4)性能指标对状态、控制以及终点状态的要求

最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标积分型性能指标，表示对整个状态和控制过程的要求

1/9/2023199现代控制理论最优控制问题(4最优控制问题(4)性能指标对状态、控制以及终点状态的要求，复合型性能指标积分型性能指标，表示对整个状态和控制过程的要求

终点型指标，表示仅对终点状态的要求1/9/2023200现代控制理论最优控制问题(4)性能指标对状态、控制以及终点状态的要求

2.1泛函与变分法基础2.2欧拉方程2.3横截条件2.4含有多个未知函数泛函的极值2.5条件极值2.6最优控制问题的变分解法第2章求解最优控制的变分方法1/9/2023201现代控制理论第2章求解最

求解最优控制的变分方法2.1泛函与变分法基础平面上两点连线的长度问题

1/9/2023202现代控制理论求解最优控制的变

求解最优控制的变分方法2.1泛函与变分法基础平面上两点连线的长度问题

1/9/2023203现代控制理论求解最优控制的变

求解最优控制的变分方法2.1泛函与变分法基础平面上两点连线的长度问题

一般来说，曲线不同，弧长就不同，即弧长依赖于曲线，记为1/9/2023204现代控制理论求解最优控制的变

求解最优控制的变分方法2.1泛函与变分法基础平面上两点连线的长度问题

一般来说，曲线不同，弧长就不同，即弧长依赖于曲线，记为称为泛函

称为泛函的宗量

1/9/2023205现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释1/9/2023206现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释1/9/2023207现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释宗量的变分1/9/2023208现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释宗量的变分泛函的增量1/9/2023209现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释宗量的变分泛函的增量泛函的变分1/9/2023210现代控制理论求解最优控制的变

求解最优控制的变分方法泛函与函数的几何解释连续泛函

宗量的变分趋于无穷小时，泛函的变分也趋于无穷小线性泛函

泛函对宗量是线性的宗量的变分泛函的增量泛函的变分1/9/2023211现代控制理论求解最优控制的变

求解最优控制的变分方法定理2.2若泛函有极值，则必有上述方法与结论对多个未知函数的泛数同样适用

1/9/2023212现代控制理论求解最优控制的变分方法定理2.2若泛函有极值，则必

求解最优控制的变分方法2.6最优控制问题的变分解法2.6.4终值时间自由的问题2.6.3末端受限问题2.6.2固定端问题2.6.1自由端问题1/9/2023213现代控制理论求解最优控制的变求解最优控制的变分方法2.6.1自由端问题约束方程新的泛函令有哈米顿函数

1/9/2023214现代控制理论求解最优控制的变分方法2.6.1自由端问题约束方程新

求解最优控制的变分方法进行变分令有伴随方程

必要条件1/9/2023215现代控制理论求解最优控制的变

求解最优控制的变分方法例2.5

哈米顿函数伴随方程边界条件必要条件1/9/2023216现代控制理论求解最优控制的变

求解最优控制的变分方法最优控制代入状态方程并求解令1/9/2023217现代控制理论求解最优控制的变求解最优控制的变分方法2.6.2固定端问题性能指标分部积分进行变分令变分为零1/9/2023218现代控制理论求解最优控制的变分方法2.6.2固定端问题性能指标分

求解最优控制的变分方法边界条件指标