基于Elman网络的非线性系统增强式学习控制
王雪松1
程玉虎1
易建强2
王炜强1
1.中国矿业大学,信息与电气工程学院,江苏,徐州,2210082.中国科学院,自动化研究所,北京,100080
摘要：针对具有连续状态和未知系统模型的非线性系统控制问题,提出一种基于Elman神经网络的Q学习控制策略.利用Elman网络良好的动态特性及泛化能力,对状态-动作对的Q值进行在线估计,解决状态空间泛化中易出现的"维数灾"问题.借鉴TD(λ)算法中状态的资格迹机制,通过对权值向量定义对应的资格迹来加速神经网络的学习过程.将所提方法应用于具有连续状态的小车爬山控制问题,学习系统在经过大约60多次学习后即能获得小车爬山控制策略,仿真结果表明所提方法能够有效解决具有连续状态的非线性系统的无模型增强学习控制.
关键词：非线性系统增强学习Q学习Elman网络资格迹
分类号：TP18(自动化基础理论)
资助基金：国家自然科学基金(60475030)
论文发表日期：2006-09-01
在线出版日期：2025-08-15（本平台首次上网日期，不代表文献的发表时间）
页数：5( 653-657 )
英文信息