|
|||||
|
|
| 基于5要素试错更新算法SARSA(λ)的自动发电控制 | |
| 作者姓名： | 余涛 张水平 |
| 作者单位： | 华南理工大学 电力学院,华南理工大学 电力学院 |
| 基金项目： | 国家高技术研究发展计划(“863”计划)资助项目(2012AA050209); 国家自然科学基金资助项目(51177051); 中央高校基本业务费重点资助项目(2012ZZ0020). |
| 摘 要： | 本文提出了一种基于5要素试错更新算法SARSA(λ)强化学习的随机最优自动发电控制方法. 该方法不依赖任何系统模型和先验知识并通过试错机理寻求最优控制策略. 以控制性能标准(control performance standards, CPS)和区域控制偏差(areal control error, ACE)瞬时滚动值为基础设计了即时奖励函数, 有效提高了该方法的收敛速度和控制效果, 并在算法中融入了资格迹以解决二次调频过程的延时问题. 本文所提出的控制方法在进行状态空间搜索时, 能有效摆脱避免搜索较大扰动状态, 以此获得更佳的控制效果. 标准两区域和南方电网仿真模型研究表明, 本算法能给系统提供更加安全的控制策略, 具有比Q(λ)算法更好的控制性能, 有效提高CPS考核的合格率. |
| 关 键 词： | SARSA(λ)算法 自动发电控制 强化学习 控制性能标准(CPS) |
| 收稿时间： | 2012-07-11 |
| 修稿时间： | 2013-06-04 |
| 点击此处可从《控制理论与应用》浏览原始摘要信息 | |
| 点击此处可从《控制理论与应用》下载全文 | |