基于深度强化学习的液流电池储能变流器控制优化研究.pdfVIP

哈尔滨工业大学工学硕士学位论文

摘要

课题以基于锌溴液流电池储能的新能源发电并网系统作为研究背景，进行锌

溴液流电池储能变流器系统（PowerConversionSystem,PCS）设计与优化控制研

究。核心工作在于设计一种与锌溴液流电池电化学反应机理相匹配的DC48V-

AC380V双向储能变流器系统，用以提高锌溴液流电池储能系统响应速度与稳定

性等技术指标。为实现这一目标，将深度强化学习理论用于PCS控制参数优化，

以改善其稳定性及响应速度等技术指标，为液流电池的高效储能应用提供参考。

主要研究内容如下：

针对PCS中近网侧的前级三相PWM变换器进行设计，建立前级三相PWM

变换器的数学模型，对三相PWM变换器工作在整流状态和逆变状态的控制策略

分别进行研究。推导系统功率环的小信号模型，实现对PCS控制环路中功率环、

电压环和电流环控制参数的优化设计。

建立锌溴液流电池数学模型，推导锌溴液流电池充放电控制规律，据此获取

锌溴液流电池PCS的优化控制机理。对近电池侧的后级谐振变换器的工作原理进

行分析，建立CLLC变换器的基波等效模型，完成后级CLLC谐振变换器的参数

设计及控制策略研究。对包括前级三相PWM变换器、后级CLLC谐振变换器和

锌溴液流电池在内的储能变流器系统进行仿真研究，对所设计储能变流器系统的

有效性进行验证。

为改善PCS电压响应特性和频率响应特性，使储能变流器系统在复杂负载波

动的情况下能够快速跟随随机变化的供电负荷，将深度强化学习策略引入PCS控

制参数优化。利用深度强化学习来实现充电过程中PCS电压外环PI参数优化及

放电过程功率环阻尼系数和转动惯量的自适应调整，有效提高PCS响应速度及稳

定性等技术指标。

完成功率为3kW的双向储能变流器前级三相PWM变换器的硬件和软件设计，

对所提出的储能变流器控制拓扑和控制策略进行验证。突出对前级三相PWM变

换器基于所提控制策略在PCS放电过程的工作状态进行分析，通过功率指令突变

和负载突变对所提控制策略的有效性进行验证。实验分析表明，所设计的储能变

流器系统响应速度低于20ms，电压电流畸变率均在5%以内。

关键词：储能变流器；深度强化学习；三相PWM变换器；CLLC谐振变换器

-I-

哈尔滨工业大学工学硕士学位论文

Abstract

Basedonzinc-bromineliquidflowbatteryforenergystorageofnewenergygrid-

connectedsystem,thepaperfocusesonthedesignandcontroloptimizationofthe

powerconversionsystem(PCS).ThecoreworkistodesignaDC48V-AC380V

bidirectionalPCSwhichiscompatiblewithelectrochemicalreactionmechanismof

zinc-bromineflowbattery,therebytheresponsespeedandstabilityofthePCSofzinc-

bromineflowbatteryisimproved.Toachievethispurpose,deepreinforcementlearning

isappliedtooptimizethecontrolparametersofthepowerconversionsystemtoimprove

itstechnicalspecifications