基于深度强化学习的微网储能系统控制策略研究

来源 :电网技术 | 被引量 : 0次 | 上传用户:jiayueye
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
微网作为新兴的能源管理形式,近年来发展迅速,为保障微网系统能安全、稳定、经济的运行,为其提供合理的能量调度策略是关键.微网根据运行模式的不同,可分为并网微网和孤岛微网两大类.该文以并网微网为研究对象,应用Simulink仿真技术,按照恒功率控制(PQ控制)原理,搭建了一个包含外部电源、光伏发电、储能,以及负荷的微网系统.然后以此仿真系统为基础,结合深度强化学习中的双重深度Q学习算法,以最小化微网24h从外电网取电费用为目标,在满足微网系统电压偏差、功率平衡以及储能的荷电状态等约束下,以储能的实时充放电功率为控制变量,训练得到储能控制的优化策略.并通过实验验证与传统方法进行对比,分别从定性角度分析了储能充放电策略的合理性,和从定量角度展示了该文所提方法在优化购电费用上的有效性.
其他文献
在多能互补系统调度中考虑诸如需求响应和抽蓄等可控元素可以应对可再生能源出力的随机性,减少结算时的电量偏差,从而增加效益.为减少可控元素备而不用造成的浪费,在梯级水光蓄联合发电能源系统中,将中长期可控元素决策优化引入系统日前优化调度过程中,构建了由上层的月度优化决策以及下层的日前优化调度组成的嵌套调度模型.在月度模型中考虑出清电价的不确定性构建月度鲁棒优化调度模型,获得可控元素调用日期,从而避免可控元素备而不用的情况.在多能互补发电系统日前优化调度模型中构建了弃水弃光动态奖罚机制和可中断负荷(interru
为抑制配电网交流故障持续期间柔性多状态开关(flexible multi-state switch,FMSS)注入短路点的故障电流,首先采用基于解耦双同步参考坐标系的瞬时对称分量分解方法对配电网不对称故障期间FMSS故障侧端口出现的负序、零序电流进行抑制.进一步推导出配电网三相短路接地故障时FMSS在不同运行工况下的系统向量图,利用对称分量法建立含FMSS配电网故障时的复合序网,分析配电网在对称性故障、不对称性故障时的故障电流大小,提出了一种带电压死区的无功下垂控制策略,实现故障状态下对FMSS注入短路点
现有的逆变电源交流送出侧短路故障分析研究针对暂态期间控制系统非线性控制环节的影响缺乏定量考虑,因此难以保证暂态电流的解析精度.为精确刻画逆变器故障暂态特征,提出了一种计及锁相环(phase-locked loop,PLL)输出动态特性的逆变电源故障暂态电流解析方法.首先详细分析了锁相环故障暂态特征及其对电流环动态特性的影响,其次针对PLL输出角频率与工频补偿角频率存在静态误差的情况,提出基于复数域形式解耦的数理方法,分析该场景导致dq耦合下的暂态电流.进一步基于时间断面分段描点实现了考虑PLL非线性动态输
随着分布式资源比例在配电网中不断提高,如何为拥有源荷二重属性的产消者提供低信任成本交易平台和经济性高的智能合约是一个重要的问题.具有分布式特点和工作量证明(proof of work,PoW)安全机理的区块链技术被认为是目前最为适合分布式能源交易的工具之一.针对多产消者电能交易问题提出了区块链技术支撑的P2P智能合约.首先,建立了产消者的资源量化模型;其次,提出了基于P2P思路的产消者日前合约制定方法,产消者通过拉格朗日解耦原理和次梯度法对电能计划函数进行求解,期间根据价格更新函数在辅助区块链上实现信息交
随着可再生能源渗透率的不断提高,新能源将承担部分调频任务.然而风电出力的不确定性极大地限制了其所提供的调频辅助服务利益最大化.提出了一种云储能租赁机制以降低风电的投标偏差惩罚并提高云储能聚合商的收益.在该机制下,风电首先提出租赁储能容量与额定功率的需求,云储能聚合商合理组合实际储能以满足风电需求.进一步提出风储协调策略,使风电可利用租赁储能实现风储联合投标利益最大化,而云储能聚合商将剩余的云储能通过最优组合参与电力市场投标.引入鲁棒优化模型以计及风电与市场价格的不确定性.最后利用实际风电出力和储能数据以及
随着储能技术的进步和共享经济的发展,共享储能电站服务模式将成为未来用户侧储能应用的新形态.提出基于储能电站服务的冷热电联供型多微网系统双层优化配置方法.首先,提出储能电站服务这种新型的共享储能模式,分析共享储能电站的运行方式和盈利机制.其次,将储能电站服务应用到冷热电联供型多微网系统中,建立考虑2个不同时间尺度问题的双层规划模型,上层模型负责求解长时间尺度的储能电站配置问题,下层模型负责求解短时间尺度的多微网系统优化运行问题.再次,根据下层优化模型的Karush-Kuhn-Tucher(KKT)条件将下层
电网不对称接地故障下,充分利用逆变器容量,最大化支撑电网电压有助于提升光伏逆变器的低电压穿越能力,减少其大面积切机风险,保障电网的可靠运行.针对该问题,提出电网不对称接地故障下光伏逆变器的最优电压支撑策略.介绍了逆变器对并网点电压的支撑原理;以正序电压支撑最大化为首要控制目标,正序电流为约束条件,构建拉格朗日函数,推导正序有功电流与无功电流的最佳分配关系;以负序电压最优抑制为次要控制目标,逆变器最大允许电流为约束条件,构建拉格朗日函数,推导负序有功电流与无功电流的最佳分配关系;在此基础上,综合考虑有功功率
为准确可靠识别直流配电网接地故障,解决现有基于故障暂态信息识别方法可靠性和灵敏度不足的问题,提出基于探测信号注入的接地故障识别方案.提出一种利用模块化多电平换流器(modular multilevel converter,MMC)注入正弦探测信号的附加控制策略;并进一步结合MMC响应速度、电网安全运行准则和测量设备精度等约束确定了探测信号参数的选择依据;在此基础上,分析了故障网络对探测信号的响应特征,得出从馈线首端看入的线路零模阻抗在故障下显感性,而非故障下显容性的结论;据此设计了接地故障识别方法,方法兼
针对柔直配电线路保护存在的阈值整定困难、高阻故障时保护容易拒动和噪声干扰下灵敏性低等问题,提出一种基于门控循环单元(gate recurrent unit,GRU)深度学习模型的柔直配电线路保护方案.首先,分析了基于限流电抗器的线路短路故障的幅频特性,并利用广义S变换提取频域特性下的故障特征量,将其作为GRU网络的输入数据.然后,构建并训练GRU深度学习模型,提取时间序列下故障样本的深层次特征,并结合支持向量机(support vector machine,SVM)分类器,实现故障快速识别和隔离.最后,在
混联高压直流输电系统能够综合电网换相型换流器(line commutated converter,LCC)和模块化多电平换流器(modular multilevel converter,MMC)的技术优势,为解决我国能源资源与能源需求逆向分布问题提供新途径,具有广阔的工程应用前景.针对送端LCC、受端LCC+MMC的白鹤滩—江苏混联高压直流输电工程,首先研究工程中MMC循环功率的产生机理,分析送端交流系统三相短路的故障响应及恢复特性,总结影响混联高压直流系统功率恢复速度的关键因素.针对MMC对混联直流输电