Markov控制过程基于单个样本轨道的在线优化算法
唐昊
奚宏生
殷保群
1.中国科学技术大学自动化系,合肥,2300262.中国科学技术大学自动化系,合肥,2300263.中国科学技术大学自动化系,合肥,230026
摘要：在Markov性能势理论基础上,研究了Markov控制过程的性能优化算法.不同于传统的基于计算的方法,文中的算法是根据单个样本轨道的仿真来估计性能指标关于策略参数的梯度,以寻找最优(或次优)随机平稳策略.由于可根据不同实际系统的特征来选择适当的算法参数,因此它能满足不同实际工程系统在线优化的需要.最后简要分析了这些算法在一个无限长的样本轨道上以概率1的收敛性,并给出了一个三-状态受控Markov过程的数值实例.
关键词：Markov控制过程Markov性能势随机平稳策略在线优化
分类号：TP202(自动化技术及设备)
资助基金：国家自然科学基金(69974037)国家高性能计算基金(00208)
论文发表日期：2002-01-01
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：7( 865-871 )
英文信息