基于深度强化学习的电力市场虚拟投标策略

来源 :中国电机工程学报 | 被引量 : 0次 | 上传用户:pengxiubin
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
针对电力现货市场中日前(day-ahead,DA)市场和实时(real-time,RT)市场的价格差异导致的市场运行风险大、效率低等问题,可采用虚拟投标(virtual bidding,VB)对未知分布的日前和实时价差进行套利,以促进二者的价格趋同.从时空维度搭建虚拟投标的市场架构,将虚拟投标划分为机组型和负荷型2种类别,以虚拟投标者累积收益最大化为目标,建立含预算约束的多区域多时段虚拟投标模型,该模型可表述为经典的0-1背包问题.同时,采用条件风险价值工具量化风险偏好、规避、中立3种类型的虚拟投标者所面临的风险,建立考虑风险度量的电力市场虚拟投标策略模型.针对这一问题的求解,构建深度强化学习(deep reinforcement learning,DRL)网络框架,通过设计合理的状态、动作空间及奖励函数,并利用深度Q网络与环境交互,获得信息反馈并优化神经网络参数,实现对最优投标策略的有效求解.利用美国PJM电力市场2018年6—12月数据计算虚拟投标者的累积收益和夏普比率,并与贪心算法、动态规划等方法进行对比,验证了该文模型和算法的有效性、优越性.
其他文献
目的:探讨叶黄素对胶质瘤细胞增殖、侵袭和凋亡的影响及可能机制.方法:采用低、中、高剂量的叶黄素干预胶质瘤细胞48 h,细胞计数试剂盒和Transwell法检测细胞活力和侵袭,流式细胞术检测周期分布和凋亡,实时荧光定量PCR (RT-qPCR)检测含α/β水解酶结构域蛋白11反义RNA1(ABHD11-AS1)表达.将ABHD11-AS1小干扰RNA转染胶质瘤细胞U251,检测干扰ABHD11-AS1表达对U251细胞增殖、凋亡和侵袭的影响.结果:低剂量叶黄素对U251细胞存活、周期分布、侵袭、凋亡、ABH
介绍了一种新型的安全芯片操作系统,该系统由存储及文件管理子系统及安全子系统组成.以扇区为基本单元组成微小文件管理系统,结合热备份的机制实现无冗余写入的掉电保护功能.设计了指令驱动的安全状态寄存器,通过状态寄存器当前读写权限状态与文件预置的读写权限的比对,判决访问的合法性.最终实现了文件空间随应用自适应增长、高效的可定制安全的芯片操作系统.
目的:观察调神健脾法针灸结合治疗慢性非特异性腰痛的临床疗效.方法:选取90例慢性非特异性腰痛患者,采用随机数字表法分为调神健脾组、电针组、西药组,每组30例.调神健脾组采用调神健脾法针灸结合治疗,电针组给予腰骶部电针治疗,西药组口服尼美舒利联合盐酸雷尼替丁胶囊.3组均连续治疗2周,6个月后随访.于治疗前、治疗2次、1周、2周以及6个月后随访时观察3组患者疼痛视觉模拟评分法(VAS)和日本骨科学会(JOA)下腰痛评分,并评价临床疗效.结果:治疗2周后,调神健脾组总有效率为90.0%,高于电针组76.7%和西
CO2捕集是实现碳中和的重要技术路径.该文实验研究了298、348K的单组分CO2和298、313K的CO2/H2O双组分气体,在活性炭、活性氧化铝、3A、13X中的等温吸附和动态吸附特性.基于Langmuir、LRC、Toth、DA、Freundlich吸附模型,对单组分CO2吸附预测与实验结果进行了对比分析.研究了CO2/H2O吸附过程进气水蒸气含量、流量、温度对4种吸附剂的穿透曲线和吸附量的影响规律.结果表明,单组分CO2吸附量:13X>活性炭>活性氧化铝>3A,CO2/H2O穿透时间随流量增大和温
介绍郭勇教授辨治肺癌相关性疲乏的临床经验.郭勇教授认为,从现代医学的角度讲,肺癌相关性疲乏与疾病分期、手术、放化疗、靶向治疗等均有密切联系;而从中医学的角度看,正气不足、肺脾气虚是肺癌发生的根本病因,也是导致肺癌相关性疲乏的根本原因.肺癌相关性疲乏多出现于肺癌肺脾气虚证、阴虚内热证、气阴两虚证等证型中,治疗上,肺脾气虚者,以理气健脾为治则,方选四君子汤加减;阴虚内热者,以养阴清热为治则,方选三参汤加减;气阴两虚者,以益气养阴为治则,方选生脉饮加减.此外,夹痰、夹瘀者宜随症加减.主张肺癌治疗的全程皆需重视顾
开发有效的风机电磁暂态模型是进行风电并网研究的基础.然而,风机厂家对其关键策略保密使得风机建模十分困难.为了解决此难题,该文对实际直驱风机进行大量故障穿越测试,利用实测数据解析风机的故障响应特性,提出适用于对称和不对称电压跌落的通用故障穿越响应曲线.然后,推导不同故障阶段下有功和无功功率响应的表达式,包括故障期间的穿越控制过程、故障清除后的恢复控制过程及不同过程间的暂态切换.据此该文设计一个通用的有功和无功电流参考值发生器,形成直驱风机故障穿越全过程的通用电磁暂态建模方法.最后,利用实际风机的测试数据验证
由于可再生能源电源和电动汽车的急速发展和其可观的环境效益,越来越多的可再生能源和电动汽车接入到配电网中.由于可再生能源和电动汽车的随机不确定性,电力特性发生改变,导致配电网的安全性和经济性降低.因此,为使电网更加经济,储能技术在调节系统功率方面受到越来越多的关注.该文提出含可再生能源电源的配电网中储能和电动汽车运行调度优化模型,以减小损耗,改善电压分布,从而使储能或电动汽车聚合商效益最大化.为得到最优调度,提出3种基于粒子群算法的约束策略,包括死区约束、充放电周期约束和充放电功率优化.最后,采用IEEE
目的:观察基于肌筋膜触发点的干针疗法对颈肩肌筋膜疼痛综合征患者的临床疗效.方法:选取86例颈肩肌筋膜疼痛综合征患者进行前瞻性研究,按随机数字表法将其分为研究组与对照组各43例,对照组采取常规电针疗法,研究组采取基于肌筋膜触发点的干针疗法,2组均连续治疗3个月.观察2组临床疗效,比较2组治疗前后中医证候评分、颈椎活动度(CROM)、疼痛程度[McGill疼痛问卷评分量表(SF-MPQ)]、血清[肿瘤坏死因子-α(TNF-α)、白细胞介素-1β(IL-β)以及β-内啡肽、物质-P水平]变化.结果:研究组临床疗
《神农本草经》中对邪气有治疗作用的药物有89味,通过对药物的品类分布、药性特点、现代应用等进行分析,发现其三品分布由高到低依次为上品、中品、下品,性味最多的是苦寒,其次为苦平、甘平、辛温.提示这些药物对邪气的治疗作用分为两部分:一是直接祛除邪气;二是通过补益气血或温阳化湿等功能达到祛邪效果.89味药物中有42味治疗邪气的药物沿用至今,涉及16个现代中医药功效分类,主要包括补虚药、清热药、解表药、化痰药、收涩药等.《神农本草经》中治疗邪气的药物作用机制复杂,需要与临床经验相结合进一步研究分析.
目的:观察在常规疗法基础上加用针刀联合温针灸治疗风寒湿痹型膝骨关节炎患者的临床效果.方法:纳入80例风寒湿痹型膝骨关节炎患者,根据治疗方式的不同分为2组各40例,2组均予营养软骨细胞的药物治疗,同时外敷药膏.对照组应用温针灸治疗,研究组应用针刀联合温针灸治疗.2组均治疗4周.比较2组的临床效果,观察治疗前后临床症状、骨代谢指标[骨钙素(BGP)、降钙素(CT)、骨保护素(OPG)]与炎性因子[白细胞介素-1(IL-1)、胰岛素样生长因子-1(IGF-1)、纤维细胞生长因子-2(FGF-2)、转化生长因子-