求解多目标暂态电压紧急控制的强化学习方法

发布时间：2022-05-08 20:38

　　暂态电压崩溃事故严重威胁电网安全,迫切需要采取相应紧急控制.以发电机端电压参考值调节量和容抗器无功投切量为控制变量,利用轨迹灵敏度搭建多目标暂态电压安全紧急控制模型,分两阶段最小化关键负荷节点电压偏差、控制代价和发电机无功出力比例的方差.采用简化强化学习方法求解该模型,重设解空间状态函数并调整动作幅度,引进状态敏感度解决探索和应用的矛盾.将可行域划分为若干小区域,单独评判它们存在最优解的可能,缩小搜索范围.通过优化搜索策略进一步提高帕累托前沿质量,并依据实际运行状况拟定目标函数权重并确定折中解.在某省级电网进行时域仿真,结果表明,所提出方法能将暂态电压纠正到安全状态,且在求解效率和帕累托前沿质量方面比法线边界交叉法优越. 

【文章页数】：9 页

【文章目录】：
1 暂态电压安全紧急控制问题的多目标优化模型
    1. 1 控制前期的优化模型
    1. 2 控制后期的优化模型
2 简化强化学习方法应用于多目标最优控制模型的求解
    2. 1 控制变量离散化
    2. 2 动作范围
    2. 3 立即奖励值
    2. 4 状态函数
    2. 5 状态敏感度
    2. 6 搜索策略
        2. 6. 1 初步搜索
        2. 6. 2 二次搜索
            1) 主循环
            2) 内循环
    2. 7 折中最优解的选择
        2. 7. 1 目标函数的权重
        2. 7. 2 折中解的确定
3 算例分析
    3. 1 控制效果分析
        1) 分区3 中发生故障
        2) 分区10 中发生故障
    3. 2 RRL与NBI + GAMS算法的对比分析
        3. 2. 1 帕累托前沿直观的对比分析
        3. 2. 2 支配关系的对比
        3. 2. 3 帕累托前沿均匀性的数值分析
        3. 2. 4 计算时间比较
    3. 3 RRL帕累托前沿的数值稳定性
4 结论


【参考文献】：
期刊论文
[1]求解多目标协调二级电压控制的简化强化学习方法[J]. 李婷,刘明波.  中国电机工程学报. 2013(31)
[2]模型预测暂态电压稳定紧急控制的简化空间算法[J]. 郭挺,谢敏,刘明波.  中国电机工程学报. 2012(16)
[3]考虑暂态电压稳定的二级电压紧急控制[J]. 刘明波,高强,林舜江,潮铸.  华南理工大学学报(自然科学版). 2011(08)
[4]基于多步回溯Q（λ）的PSS最优控制方法的研究[J]. 余涛,甄卫国.  电力系统保护与控制. 2011(03)
[5]暂态电压安全预防控制优化的轨迹灵敏度法[J]. 林舜江,刘明波.  电力系统自动化. 2010(04)
[6]电力系统微分代数模型的奇异性和暂态电压稳定[J]. 吴浩,郭瑞鹏,韩祯祥.  电力系统自动化. 2006(13)

硕士论文
[1]有关强化学习的若干问题研究[D]. 赵昀.南京理工大学 2009



本文编号：3652336