基于改进分层强化学习的CPS指令多目标动态优化分配算法

应用经典强化学习方法的控制性能标准(control performance standard,CPS)下自动发电控制(automatic generation control,AGC)指令(CPS指令)由调度端至电网各台机组的分配过程不可避免出现维数灾难问题。提出应用分层强化学习的方法,将全网机组按调频时延做初次分类,CPS指令逐层分配形成任务分层结构。在分层Q学习算法层与层之间引入一个时变协调因子,改进的分层Q学习算法有效提高原算法收敛速度。奖励函数中设计不同的权值线性组合,展示保守及乐观控制下系统CPS控制水平和调节成本的变化关系。南方电网统计性仿真分析表明,改进分层Q学习算法较分层Q学习算法平均收敛时间缩短47％,在复杂随机扰动的环境中改进算法能有效提高系统CPS考核合格率,并降低调节成本约5％。     

基于分层相关均衡强化学习的CPS指令优化分配算法

提出了一种应用在控制性能标准(CPS)下自动发电控制(AGC)指令(CPS指令)由调度端至各台机组的动态分配过程的分层多智能体相关均衡(HCEQ)算法。根据机组调频时延对其进行聚类分层,有效解决了CPS指令分配过程的维数灾难问题。相比单智能体强化学习算法,HCEQ算法引入了均衡目标函数的求解,有效提高了算法寻优速度。将功率偏差、水电裕度和调节成本目标以线性加权的方法转化为算法奖励函数,研究了不同权值下CPS控制性能和调节成本的变化关系。南方电网模型仿真研究表明,HCEQ算法具有较快的收敛速度,在复杂随机扰动的环境中能有效提高系统CPS考核合格率,并有效降低AGC调节成本。     

强化Q学习——模糊多目标AGC调节容量动态优化分配策略的研究

针对AGC调节容量多目标优化分配存在着无法完全描述机组特性的问题,通过研究提出采用基于强化Q学习的优化分配方法.将AGC系统视为“不确定的随机系统”,结合ACE的调节死区以及CPS评价标准,建立了AGC调节容量优化分配问题的马尔可夫决策过程模型,并引入Q学习方法对MDP的最优值函数进行学习,仿真结果表明,该强化Q学习-模糊多目标AGC调节容量动态优化分配策略能够适应电网环境变化的要求.     

基于CEQ(λ)多智能体协同学习的互联电网性能标准控制指令动态分配优化算法

在CPS指令动态分配过程中,应用单智能体Q(λ)算法下的CPS合格率虽然可以满足要求,但还存在收敛速度较慢、寻优空间较小等问题。为此,提出应用多智能体相关均衡强化学习的方法来弥补单智能体强化学习的不足。根据调频时延将AGC机组分成煤电、气电和水电等类型,对CEQ(λ)应用于这n类智能体组成的CPS调节指令动态分配进行研究分析。标准两区域模型及南方电网模型仿真研究表明:多智能体CEQ(λ)算法适用于随机、机组组合复杂的互联电网CPS指令动态最优分配,能有效提高系统的适应性、鲁棒性和CPS考核合格率。     

互联电网CPS标准下计及一次调频的最优AGC控制模型

分析互联电网环境下机组一次调频的重要性及其对电网自动发电控制(automatic generation control,AGC)的影响,针对传统AGC控制策略难以计及一次调频的问题,提出AGC与一次调频协同控制的线性增量表达,进而构建互联电网控制性能标准(control performance standard,CPS)下计及一次调频的最优AGC控制的混合整数线性规划模型。在模型中,根据电力系统特性,将AGC机组调节指令状态变量由传统的三态变量转化为两态变量表示;采用线性化手段,将传统非线性最小加减速时间约束线性化。某省实际系统的计算结果表明:新模型显著减少了AGC机组的下令次数,有效提高了CPS考核指标水平,明显降低了系统调节成本,具有良好的应用前景。     

基于Q学习的互联电网动态最优CPS控制

控制性能标准(control performance standard,CPS)下互联电网自动发电控制(automatic generation control,AGC)系统是一个典型的不确定随机系统,应用基于马尔可夫决策过程(Markov decision process,MDP)理论的Q学习算法可有效地实现控制策略的在线学习和动态优化决策。将CPS值作为包含AGC的电力系统“环境”所给的“奖励”,依靠Q值函数与CPS控制动作形成的闭环反馈结构进行交互式学习,学习目标为使CPS动作从环境中获得的长期积累奖励值最大。提出一种实用的半监督群体预学习方法,解决了Q学习控制器在预学习试错阶段的系统镇定和快速收敛问题。仿真研究表明,引入基于Q学习的CPS控制可显著增强整个AGC系统的鲁棒性和适应性,有效提高了CPS的考核合格率。     

扰动控制性能评价标准在福建电网的应用

简要介绍了华东电网正在推行的控制性能标准(control performance standard,CPS)/扰动控制标准(disturbance control standard,DCS),以及基于CPS/DCS的系统扰动控制性能评价及考核办法。提出在福建电网采用自动发电控制(automatic generation control,AGC)机组及非AGC机组按照正常速率或紧急速率自动调节,或采用人工调节相结合的DCS控制策略。建立了基于CPS/DCS的AGC控制策略中4个控制器之间的协调机制,并根据华东电网CPS/ DCS考核结果对各控制器的控制修正系数进行优化。在福建电网EMS系统中完成了DCS控制策略及AGC控制策略的功能开发,最后通过福建电网实际发生的扰动对该策略进行了验证。     

控制性能标准下考虑系统频率偏差特性的多时间尺度机组优化调度

针对风电并网后传统的2阶段调度中自动发电控制（automatic generation control,AGC）机组调节压力过大，普通多时间尺度调度中未考虑控制性能标准（control performance strandard,CPS）考核指标导致机组调节费用较高等问题，通过对电网实际频率数据分析发现系统频率偏差均值在较长时间尺度上正负变化具有规律性，提出CPS指标下考虑系统频率偏差特性的多时间尺度优化调度模型。最后通过Matlab算例仿真验证模型的有效性，结果表明：所提出的新调度模型通过预测未来较长时间尺度下系统频率偏差符号的正负，在日内、实时调度阶段的关键时刻减少了非AGC机组调节出力，相比现有模型可以使电网满足CPS考核标准的同时减轻AGC机组调节压力，节省综合运行成本。     

降低火电调频损耗的混合储能系统容量优化配置双层模型

针对如何在降低火电机组调频损耗,提高系统调频性能的同时减小储能全寿命周期成本,提出了一种混合储能辅助火电机组参与自动发电控制(automatic generation control, AGC)的双层优化配置模型。上层模型由基于经验模态分解(empirical mode decomposition, EMD)的火电–混合储能间AGC指令分配策略和计及全寿命周期内成本收益之差、AGC综合评判指标Kp的多目标优化配置模型组成,为底层模型提供AGC初步分解指令和功率、容量约束;底层模型由计及储能荷电状态(state of charge, SOC)恢复的混合储能控制策略和火电–混合储能调频响应模型组成,将经过EMD初步分解的AGC指令再次分配给各调频资源,并向上层模型提供各调频资源出力响应曲线和SOC变化曲线;采用基于优劣解距离法(technique for order preference by similarity to an ideal solution, TOPSIS)的多目标粒子群算法求解该双层模型,避免了传统多目标粒子群算法在Pareto解集中确定全局最优解的偶然性。基于华北某电厂...     

具有先验知识的 Q学习算法在AGC中的应用

传统的自动发电控制（AGC）系统通常基于经典的线性控制理论,并且大部分二次调频采用比例积分（PI）控制器,但系统固有的非线性以及结构多变使得积分增益系数不易确定,容易造成超调或调节不足的问题,从而影响系统频率稳定。文中采用强化学习控制器代替传统的PI调节器,将考虑了死区、出力约束、机组爬坡率和时延等非线性环节的AGC系统离散化成Markov链,直接将区域控制误差作为系统状态量,并充分利用AGC环境中的已有信息,结合模糊综合决策方法,获得能够改善 Q学习效率的先验知识,采用Q学习算法对其进行学习得出离散的AGC策略。数值仿真的结果验证在非线性AGC系统中应用具有先验知识的 Q学习方法可以加快收敛速度,提高学习效率,并通过控制性能评价标准（CPS）进一步检验了该方法的可行性。     

模糊变结构控制理论在发电机综合控制中的应用

以变结构控制理论为基础,利用模糊控制理论设计了带自调整因子的控制规律,用于设计汽轮发电机组的综合控制器,这种综合控制器能很好地把汽门控制和励磁控制结合起来,解决了常规变结构控制的抖动问题,改善了系统的暂态稳定性。     

运动控制中先进控制策略的研究综述

动态响应的快速性,稳态跟踪的高精度以及行为的鲁棒性是运动控制应用中的主要性能要求。它们的获得,不仅意味着有执行机构和仪器方面的先进技术,而且重要的是新的控制策略的应用。本文介绍了针对电机速度和位置控制系统中非线性摩擦力进行补偿的几种先进控制策略：基于指数型非线性函数的在线补偿法;基于神经网络的倒控制器补偿法;鲁棒型的重复控制和变结构控制在运动控制中应用。最后,简述了运用其他先进控制策略的可能性。     

遵循安全稳定导则的电网运行安全风险在线控制决策探讨

基于风险进行电网运行控制决策,可以实现电网运行的安全稳定性和经济性的有效协调,而通常的电网运行控制规范都是基于确定性原则,为此,提出了遵循安全稳定导则进行运行安全风险控制决策的基本原则。结合在线安全稳定分析与控制决策技术工程应用的现状,分析了目前可实现的电网运行安全风险在线控制决策范畴。提出了基于风险的预防控制在线决策和紧急控制在线决策的技术路线和实现方法,计及了预防控制对紧急控制与校正控制的影响,以及紧急控制对校正控制的影响。以期促进电网运行风险控制技术的工程应用。     

PID,Predictive and fuzzy temperature control for nuclear magnetic resonance spectroscopy experiments

Temperature control inside the probe of an NMR spectrometer is dealt with. First a simple model of the system is derived by means of step response experiments. Then four control algorithms are implemented and compared. Specifically, a PID regulator is first synthesized and applied to the real plant. Then, in order to cope with the non-linearity of the plant, two adaptive predictive control algorithms are implemented, namely the generalized predictive control and the constrained receding horizon predictive control algorithms. They both show superior performance with respect to PID for control of a simulated plant model and of the real plant. Finally a feasibility study is carried out for a fuzzy controller; its unsatisfactory behaviour in simulation prevents one from applying it to the plant.     

钢丝连续拉丝机张力自适应解耦控制

以钢丝连续拉丝机为研究对象,通过对拉丝机张力模型的研究,将PID控制器和自适应拉丝模尺寸变化的自适应律以及前馈解耦方案相结合,提出了一种新的应用于拉丝机张力的自适应解耦控制方案.给出了系统张力模型和用于参数调整的自适应解耦算法.通过仿真与实验研究,表明该控制器可以解决拉丝机张力耦合控制问题,实际应用效果良好.     

具有PI结构的自校正动态矩阵加权控制算法

提出了一种改进自校正动态矩阵控制算法。算法中控制器具有比例积分（ＰＩ）结构，即时控制由各时刻预测控制的加权平均产生，加权系数基于预测输出误差的大小及时调整。仿真结果表明，本文算法比一般的自校正动态矩阵控制对于时变对象具有更强的鲁棒性。     

微电网控制策略综述

微电网灵活运行方式使其与传统控制有显著不同.详细介绍了微电网构成元件分布式电源和负荷的控制策略;在此基础上对现有微电网控制策略进行分类,并阐述了集中控制、分散控制和混合控制各种方法的特点;最后对微电网各控制策略优缺点进行总结.     

基于智能控制理论的汽轮发电机组的协调控制

以模糊变结构理论为基础,把汽门控制,制动电阻控制及附加励磁控制很好地协调起来。在发生短路故障后的第一摇摆过程中,加入制动电阻控制来辅助模糊变结构汽门控制及励磁控制,可以有效地抑制第一摇摆的幅值,在以后的振荡过程中,只依靠模糊汽门控制及模糊附加励磁控制来控制系统;     

微网运行控制策略的研究

主要研究了微网运行的3种控制方法。根据功率型电源发电功率受环境影响的特点,在并网时对其采用P-Q控制;对主控型电源,在孤岛运行时对其采用V-f控制;同时对同种多个并联电源采用Droop下垂控制。综合3种方法建立一个比较理想的控制策略来实现最终的控制效果,并建立简单微网模型,在Matlab/Simulink环境下进行微网并网、孤岛状态转换、负荷切投等不同工况的仿真,验证控制策略的有效性。     

多变量智能协调控制系统设计应用

针对火电机组被控对象非线性、迟滞、燃料大惯性并存的特性,建立了330 MW单元机组协调控制系统非线性模型,并对此模型在额定工况点下进行线性化,以此线性化模型为基础,在机组原有的协调控制系统中增加多变量解耦控制器,进而设计出与之对应的多变量协调控制系统,并通过工程试验与机组原有的协调控制效果相比较,实际结果证明了多变量智...