基于DDPG算法和SOC恢复的储能系统参与电网一次调频的控制方法

摘要

本发明提出一种基于DDPG算法和SOC恢复的储能系统参与电网一次调频的控制方法：在含储能的电力系统一次调频模型中，将储能充放电功率控制转化为序列决策问题，并采用DDPG算法进行处理，训练深度强化学习智能体并用于控制储能系统出力；为储能系统设置储能调频死区，将储能系统辅助调频过程分为调频阶段与SOC恢复阶段；在系统频率处于储能调频死区外时，DDPG智能体以减小频率偏差为目标进行动作决策；在系统频率偏差处于储能调频死区内时，DDPG智能体以减小当前SOC与SOC理想值之间偏差为目标进行动作决策。在系统频率偏差处于储能调频死区内时，DDPG智能体以减小当前SOC与SOC理想值之间偏差为目标进行动作决策，进行SOC恢复以保证储能的调频能力和使用寿命。