基于可迁移强化学习的断面输电极限计算方法

作者：李康文; 邱高^*; 刘挺坚; 刘友波; 刘俊勇; 丁理杰

来源：电网技术, 2023, 47(12): 5147-5158.

DOI：10.13335/j.1000-3673.pst.2023.0548

• 输电极限
• 无功优化
• 可迁移强化学习
• 近端策略优化
• 策略分布熵

断面输电极限是电网安全边界在断面割集的降维投影，其实质是考虑电压无功优化和多类稳定约束的复杂混合整数非凸非线性问题，而新能源的引入进一步扩大了其计算维度，传统方法难以求解。为此，提出一种基于可迁移强化学习的断面输电极限计算方法。首先，考虑暂态功角及电压稳定约束，计及包括电容器组等无功资源，建立含微分代数方程的输电极限混合整数计算模型；然后，将该模型转化为混合整数的马尔科夫决策过程，提出基于混合Categorical分布的近端策略优化求解方法；最后，引入策略分布熵最大化目标，确保智能计算模型在未见运行方式下的迁移能力，实现运行方式或边界条件切换下的输电极限快速分析。IEEE39节点系统的算例结果表明，相比传统元启发式黑盒优化算法，所提方法在几乎不牺牲精度的前提下效率提升了97.15%。

• 单位
  四川大学; 四川省电力科学研究院