基于深度强化学习的区域综合能源系统主动调节灵活性规则提取及可解释优化调度.pdfVIP

第53卷第23期电力系统保护与控制Vol.53No.23

2025年12月1日PowerSystemProtectionandControlDec.1,2025

DOI:10.19783/ki.pspc.250196

基于深度强化学习的区域综合能源系统主动调节

灵活性规则提取及可解释优化调度

11122曌111

窦嘉铭,王小君,司方远,刘兆燕,席嫣娜,刘,盛康玲,段玉戈

(1.北京交通大学电气工程学院，北京100044；2.国网北京市电力公司，北京100031)

摘要：区域综合能源系统调度需充分挖掘主动调节能力以应对新能源波动及多变负荷。针对传统方法依赖精确建

模、难以适应高不确定性、缺乏主动调节动态解析与策略可解释性的问题，提出主动调节灵活性规则提取及可解

释调度强化学习方法。首先基于设备调节边界、响应速率及耦合关系，解析量化电、热等子系统设备功率调节量

等灵活性规则指标。其次，设计融合主动调节灵活性物理规则奖励函数，将其嵌入改进深度确定性策略梯度(deep

deterministicpolicygradient,DDPG)算法框架，在策略更新过程中引入设备运行边界约束惩罚与灵活性激励，通过

动态约束构建、学习率自适应及策略可视化等增强策略物理一致性与可解释性。仿真表明，所提方法相对二次规

划、粒子群等方法调节能力指标分别提升11.08%、15.86%，且通过灵活性规则对日调节能力进行提取，为调度策

略提供可追溯的物理依据和人机协同支持。

关键词：主动调节能力；综合能源系统；灵活性；强化学习；可解释人工智能；规则提取

Extractionofactiveregulationflexibilityrulesandinterpretableoptimalschedulingfor

regionalintegratedenergysystemsbasedondeepreinforcementlearning

11122111

DOUJiaming,WANGXiaojun,SIFangyuan,LIUZhaoyan,XIYanna,LIUZhao,SHENGKangling,DUANYuge

(1.SchoolofElectricalEngineering,BeijingJiaotongUniversity,Beijing100044,China;

2.StateGridBeijingElectricPowerCompany,Beijing100031,China)

Abstract:Theschedulingofregionalintegratedenergysystemsmustfullyexploitactiveregulation