基于深度强化学习的电网紧急控制策略研究

被引:110
作者
刘威
张东霞
王新迎
侯金秀
刘丽平
机构
[1] 中国电力科学研究院有限公司
关键词
深度强化学习; 卷积神经网络; 数据驱动; 决策控制; 人工智能;
D O I
10.13334/j.0258-8013.pcsee.171747
中图分类号
TM732 [电力系统的运行];
学科分类号
080802 ;
摘要
提出一种基于深度强化学习的电网切机控制策略,所提控制策略依据电网运行环境信息,通过数据分析得到切机控制策略。首先介绍强化学习框架,阐述学习算法原理,并详细介绍Q-Learning方法。然后介绍深度学习基本概念和深度卷积网络原理,提出利用深度卷积网络提取电网运行特征,构建切机策略的思路。再结合深度学习和强化学习,构建深度强化学习框架,其中深度学习采用深度卷积神经网络模型用于提取特征,强化学习采用双重Q-Learning和竞争Q-Learning模型计算Q值,通过比较Q值大小得到切机控制策略。最后,利用IEEE 39节点系统验证了方法的正确性。
引用
收藏
页码:109 / 119+347 +347
页数:12
相关论文
共 19 条
[1]   基于随机矩阵理论与熵理论的电网薄弱环节辨识方法 [J].
刘威 ;
张东霞 ;
丁玉成 ;
吴茜 ;
邓春宇 ;
刘道伟 .
中国电机工程学报, 2017, 37 (20) :5893-5901
[2]   新能源并网系统引发的复杂振荡问题及其对策研究 [J].
李明节 ;
于钊 ;
许涛 ;
贺静波 ;
王超 ;
谢小荣 ;
刘纯 .
电网技术, 2017, 41 (04) :1035-1042
[3]   随机矩阵理论在电力系统认知中的应用初探 [J].
贺兴 ;
艾芊 ;
邱才明 ;
章健 ;
徐心怡 .
电网技术, 2017, 41 (04) :1165-1173
[4]   基于随机矩阵理论的电力系统暂态稳定性分析 [J].
刘威 ;
张东霞 ;
王新迎 ;
刘道伟 ;
吴茜 .
中国电机工程学报, 2016, 36 (18) :4854-4863+5109
[5]   基于随机矩阵理论的电网静态稳定态势评估方法 [J].
吴茜 ;
张东霞 ;
刘道伟 ;
刘威 ;
邓春雨 .
中国电机工程学报, 2016, 36 (20) :5414-5420+5717
[6]   基于随机矩阵理论的配电网运行状态相关性分析方法 [J].
徐心怡 ;
贺兴 ;
艾芊 ;
邱才明 .
电网技术, 2016, 40 (03) :781-790
[7]   基于高维随机矩阵大数据分析模型的输变电设备关键性能评估方法 [J].
严英杰 ;
盛戈皞 ;
王辉 ;
刘亚东 ;
陈玉峰 ;
江秀臣 ;
郭志红 .
中国电机工程学报, 2016, 36 (02) :435-445
[8]   电力系统暂态稳定性闭环控制(六)——控制地点的选择 [J].
张保会 ;
王怀远 ;
杨松浩 .
电力自动化设备, 2015, 35 (01) :1-5+12
[9]   关于风电不确定性对电力系统影响的评述 [J].
薛禹胜 ;
雷兴 ;
薛峰 ;
郁琛 ;
董朝阳 ;
文福拴 ;
鞠平 .
中国电机工程学报, 2014, 34 (29) :5029-5040
[10]   基于多响应信息源的电压稳定全态势量化评估与辅助决策系统 [J].
马世英 ;
刘道伟 ;
汤涌 ;
仲悟之 ;
高凯 ;
何晓洋 ;
张艳军 .
电网技术, 2013, 37 (08) :2151-2156