窗口长度自适应调整的策略迭代最优控制

在系统模型参数未知的最优控制问题中,策略迭代能否快速收敛到最优控制策略的关键在于值函数的估计.为了提升值函数的估计精度以及收敛速度,本文提出一种窗口长度自适应调整的策略迭代最优控制算法.充分利用一段时间内的历史样本数据,通过影响力函数构建窗口长度与值函数估计性能之间的定量关系,根据数据窗口长度对估计性能影响力的不同,实现窗口长度的自适应调整.最后,将本文所提方法应用到连续发酵过程,结果表明,本文所提方法能够加快最优控制策略的收敛,克服参数变化或外部扰动对控制性能的影响,从而提升控制精度....

Full description

Saved in:
Bibliographic Details
Published in控制理论与应用 Vol. 41; no. 4; pp. 745 - 750
Main Authors 方欣, 栾小丽, 刘飞
Format Journal Article
LanguageChinese
Published 江南大学自动化研究所轻工过程先进控制教育部重点实验室,江苏无锡 214122 01.04.2024
Subjects
最优控制
adaptive adjustment of window length
窗口长度自适应调整
optimal control
影响力函数
influence function
策略迭代
policy iteration
Online AccessGet full text
ISSN1000-8152
DOI10.7641/CTA.2023.21013

Cover

More Information
Summary:在系统模型参数未知的最优控制问题中,策略迭代能否快速收敛到最优控制策略的关键在于值函数的估计.为了提升值函数的估计精度以及收敛速度,本文提出一种窗口长度自适应调整的策略迭代最优控制算法.充分利用一段时间内的历史样本数据,通过影响力函数构建窗口长度与值函数估计性能之间的定量关系,根据数据窗口长度对估计性能影响力的不同,实现窗口长度的自适应调整.最后,将本文所提方法应用到连续发酵过程,结果表明,本文所提方法能够加快最优控制策略的收敛,克服参数变化或外部扰动对控制性能的影响,从而提升控制精度.
ISSN:1000-8152
DOI:10.7641/CTA.2023.21013