1、神经网络在控制中的应用,神经网络在控制中的应用神经网络辨识技术神经网络控制技术,5.1 神经网络辨识,系统辨识是自适应控制的关键所在，它通过测量对象的输入输出状态来估计对象的数学模型，使建立的数学模型和对象具有相同的输入输出特性。,神经网络对非线性函数具有任意逼近和自学习能力，为系统的辨识，尤其是非线性动态系统的辨识提供了一条十分有效的途径。,神经网络系统辨识实质上是选择一个适当的神经网络模型来逼近实际系统的数学模型。,5.1 神经网络辨识,5.1.1 神经网络系统辨识的原理,系统辨识的原理就是通过调整辨识模型的结构来使e最小。,在神经网络系统辨识中，神经网络用作辨识模型，将对象的输入输出状态
2、u，y看作神经网络的训练样本数据，以J=1/2e2作为网络训练的目标，则通过用一定的训练算法来训练网络，使J足够小，就可以达到辨识对象模型的目的。,5.1 神经网络辨识,5.1.2多层前向BP网络的系统辨识,假设非线性对象的数学模型可以表示为：,其中f是描述系统特征的未知非线性函数，m，n分别为输入输出的阶次。则可以利用多层前向BP网络来逼近非线性函数，进而估计对象的模型。,5.1 神经网络辨识,多层前向BP网络系统辨识原理图,5.1 神经网络辨识,网络的输出可以通过下式计算得到：,H（*）表示隐层神经元的激发函数,Wij(1),Wj(2)分别表示网络第1-2层和2-3层的连接权值,5.1 神
3、经网络辨识,定义网络训练的目标函数为：,则网络训练的BP算法可以描述为：,5.1 神经网络辨识,5.1.3.递归神经网络系统辨识,递归神经网络结构,5.1 神经网络辨识,递归神经网络的输入输出关系可以描述为：,H（*）表示隐层神经元的激发函数,Wij(1),Wjk(2)分别表示网络第1-2层和2-3层的连接权值,Wi(0)表示网络第一层的递归权值,5.1 神经网络辨识,由于递归神经网络本身具有动态反馈环，可以记录以前的状态，因此用递归神经网络来对非线性对象进行辨识时只需以对象当前的输入状态u(t)和前一时刻的输出状态y(t-1)作为网络的输入即可，与前向多层神经网络相比，网络的结构较为简单。,
4、5.2 神经网络控制,神经网络在控制中主要起以下作用：,(1)基于精确模型的各种控制结构中充当对象的模型；(2)在反馈控制系统中直接充当控制器的作用；(3)在传统控制系统中起优化计算作用；(4)在与其它智能控制方法和优化算法相融合中,为其提供对象模型、优化参数、推理模型及故障诊断等。,5.2 神经网络控制,5.2.1 神经网络直接反馈控制系统,神经网络直接用作误差闭环系统的反馈控制器，神经网络控制器首先利用其它已有的控制样本进行离线训练，而后以系统的误差的均方差为评价函数进行在线学习。,5.2 神经网络控制,5.2.2 神经网络逆控制,自适应逆控制的基本思想就是用被控对象传递函数的逆模型作为串
5、联控制器对控制对象实施开环控制。,神经网络先离线学习被控对象的逆动力学模型，然后用作对象的前馈串联控制器。由于开环控制缺乏稳定性，所以神经网络还需要根据系统的反馈误差在线继续学习逆动力学模型,5.2 神经网络控制,5.2.3 神经网络内模控制,将对象模型与实际对象相并联，控制器逼近模型的动态逆。一般有两种方法：1)两个神经网络分别逼近模型和模型的逆；2)采用神经网络逼近模型，然后用非线性优化方法数值计算内模控制量。,5.2 神经网络控制,5.2.4 神经网络自适应控制,（1）神经网络模型参考直接自适应控制,模型参考自适应控制的目的是：系统在相同输入激励r的作用下，使被控对象的输出y与参考模型的
6、输出ym达到一致。这样通过调整参考模型，可以调整系统的动态特性。,神经网络控制器（NNC）先离线学习被控对象的逆动力学模型，与被控对象构成开环串联控制，而后神经网络根据参考模型输出与被控对象输出的误差函数进行在线训练，使误差函数最小。,5.2 神经网络控制,（2）神经网络模型参考间接自适应控制,在直接自适应控制的基础上，引入了一个神经网络辨识器（NNI）来对被控对象的数学模型进行在线辨识，这样可以及时地将对象模型的变化传递给NNC，使NNC可以得到及时有效的训练。,例：二关节机器人神经网络自适应控制,1）控制问题,机器人动态控制问题就是要使机器人的各关节或末端执行器位置能够以理想的动态品质跟踪
7、给定的轨迹或稳定在指定的位置上。,二关节机器人控制结构,2）机器人数学模型,坐标变换：机器人末端在空间的位置坐标可以变换为其关节角度的大小,动力学方程：,机器人动力学模型的特点,动力学方程包含的项数多，复杂。随着机器人关节数的增加，方程中包含的项数呈几何级数增加，可达数百项；高度非线性。方程的每一项都含有cos，sin等非线性因素 高度耦合。每个关节的运动都会引起其它关节的运动模型不确定性。当机器人搬运物体时，由于所持物件不同，负载会发生变化，同时，关节的摩擦系数也会随时间发生变化。,3）神经网络自适应控制,神经网络的选型：神经网络控制器控制器要求鲁棒性好，经离线训练后即可投入使用，选用模糊神
8、经网络网络的输入为四个，分别对应两个关节角的误差和误差变化率。输出为两个，对应两个关节的力矩,神经网络辨识器辨识器要求能够很好地反映机器人的动态，并具有较简单的结构。选择递归神经网络,网络的训练,辨识器的学习,目标函数：,学习算法：,控制器的学习,目标函数：,学习算法：,由神经网络辨识器提供,4）控制结果,机械手具体的参数：,初始条件：,期望轨迹：,摩擦项和扰动项：,关节1的轨迹跟踪曲线,关节2的轨迹跟踪曲线,RNNI的第一个输出轨迹,RNNI的第二个输出轨迹,5.2 神经网络控制,（3）神经网络间接自校正控制,自校正调节器的目的是在控制系统参数变化的情况下，自动调整控制器参数，消除扰动的影响
9、，以保证系统的性能指标。在这种控制方式中，神经网络(NN)用作过程参数或某些非线性函数的在线估计器。,假设被控对象的模型为yk+1f(yk)+g(yk)uk 则用神经网络对非线性函数f(yk)和g(yk)进行辨识，假设其在线计算估计值fd(yk)和gd(yk)，则调节器的自适应控制律为uk=(yd-fd(yk)/gd(yk)此时系统的传递函数为1,5.2 神经网络控制,5.2.5 神经网络学习控制,神经网络学习控制系统将神经网络与常规误差反馈控制结合起来，首先用NN学习对象的逆动力学模型，然后用NN作为前馈控制器与误差反馈控制器构成复合控制器来控制对象。系统以反馈控制器的输出作为评价函数来调节
10、神经网络的权值。这样，在控制之初，反馈控制器的作用较强，而随着控制过程的进行，NN得到越来越多的学习，反馈控制器的作用越来越弱，NN控制器的作用越来越强。,例：三关节机器人视觉伺服系统神经网络学习控制,问题描述：,利用摄像机观测目标小球与机器人末端手爪之间的相对位置，由此构成位置反馈，由相关控制器指挥机器人进行运动，使其末端手爪到达小球。,目标小球的特征,特征提取,目标在成像平面的特征可以分解为：目标中心点在成像坐标系的坐标（x，y）以及目标的半径r。,控制系统：,视觉伺服问题可以转化为：根据目标特征与期望特征的误差，通过控制器控制机器人运动，使目标特征到达期望特征。,机器人视觉伺服控制系统的
11、神经网络学习控制器,神经网络结构,神经网络的学习：,神经网络以常规控制器的输出up的最小化为目标进行学习。如果学习的目标函数定义为：J1/2(u-un)2其中u为复合控制器的输出，un为网络的输出。那么根据BP算法可得网络在线训练时的权值修正算法为：,可以看出，网络在线训练的算法无需用到机械手和特征提取的模型信息，从而可以有效、快速地对神经网络进行在线学习和优化。,控制结果,机械手的具体参数为：L1=300cm；L2=260cm；L3=260cm。摄像机的焦距:f=50cm。目标小球的半径为:10cm。,摄像机在基座坐标系的初始坐标为(490，79，337)。期望图像特征为：Xd0,Yd0，R
12、d10目标小球中心在基座坐标系的坐标为:(300，300，200),*为神经网络学习控制；o为常规比例控制器控制,图像坐标X变化曲线,*为神经网络学习控制；o为常规比例控制器控制,图像坐标Y变化曲线,*为神经网络学习控制；o为常规比例控制器控制,半径r变化曲线,基于神经网络学习控制的小球投影的变化曲线,5.2 神经网络控制,5.2.6神经网络PID控制,经典增量式数字PID 的控制算法为：,NN 是一个三层BP 网络,有M个输入节点、N 个隐含节点、3 个输出节点。输入节点对应所选的系统运行状态量,输出节点分别对应PID 控制器的3 个可调参数kp,ki,kd。,网络根据性能指标J=1/2(r-y)2进行在线学习，则可以及时更新PID控制器的参数，使系统误差在不确定严重的情况下保持最小。,试验结果：,受控对象模型：,系统仿真阶跃响应曲线,
