具有加性和乘性噪声的线性离散时间随机系统的无模型最优跟踪控制

本文研究一类同时受加性和乘性噪声影响的离散时间随机系统的最优跟踪控制问题.通过构造由原始系统和参考轨迹组成的增广系统,将随机线性二次跟踪控制(SLQT)的成本函数转化为与增广状态相关的二次型函数,由此推导出用于求解SLQT的贝尔曼方程和增广随机代数黎卡提方程(SARE),而后进一步针对系统和参考轨迹动力学信息完全未知的情形,提出一种Q-学习算法来在线求解增广SARE,证明了该算法的收敛性,并采用批处理最小二乘法(BLS)解决该在线无模型控制算法的实现问题.通过对单相电压源UPS逆变器的仿真,验证了所提出控制方案的有效性....

Full description

Saved in:
Bibliographic Details
Published in控制理论与应用 Vol. 40; no. 6; pp. 1014 - 1022
Main Authors 银玉博, 罗世贤, 万韬
Format Journal Article
LanguageChinese
Published 广西大学电气工程学院,广西南宁530004%华南理工大学自动化科学与工程学院,广东广州510640 01.06.2023
Subjects
stochastic linear quadratic tracking
model-free control
Q-learning
无模型控制
Q-学习
随机线性二次跟踪
stochastic noise
随机噪声
Online AccessGet full text

Cover

More Information
Summary:本文研究一类同时受加性和乘性噪声影响的离散时间随机系统的最优跟踪控制问题.通过构造由原始系统和参考轨迹组成的增广系统,将随机线性二次跟踪控制(SLQT)的成本函数转化为与增广状态相关的二次型函数,由此推导出用于求解SLQT的贝尔曼方程和增广随机代数黎卡提方程(SARE),而后进一步针对系统和参考轨迹动力学信息完全未知的情形,提出一种Q-学习算法来在线求解增广SARE,证明了该算法的收敛性,并采用批处理最小二乘法(BLS)解决该在线无模型控制算法的实现问题.通过对单相电压源UPS逆变器的仿真,验证了所提出控制方案的有效性.
ISSN:1000-8152
DOI:10.7641/CTA.2022.11105