基于深度强化学习的微网优化运行综述

TM732%TP181; 微网在分布式新能源消纳、负荷优化、提高能源利用效率等方面具有重要作用.但新能源出力的间歇性、负荷侧用电行为的随机性导致微网成为一个动态的复杂系统,难以通过准确的物理模型刻画,给微网优化运行带来巨大挑战.深度强化学习(deep reinforcement learning,DRL)通过与环境交互试错寻找最优策略,不依赖于新能源出力和负荷的精确建模,适用于解决序贯决策问题,在求解含有大量不确定性的微网优化运行难题时具有优势.为此,从DRL原理、DRL在单个微网以及微网群优化运行中的应用进行了综述与分析,最后对应用中所面临的算法可解释性、奖励函数设置、用户隐私性等方面进行了...

Full description

Saved in:
Bibliographic Details
Published in全球能源互联网 Vol. 6; no. 3; pp. 238 - 257
Main Authors 周翔, 王继业, 陈盛, 王新迎
Format Journal Article
LanguageChinese
Published 中国电力科学研究院有限公司,北京市 海淀区100192%国网数字科技控股有限公司,北京市西城区 100053 01.05.2023
Editorial Office of Journal of Global Energy Interconnection
Subjects
Online AccessGet full text
ISSN2096-5125
DOI10.19705/j.cnki.issn2096-5125.2023.03.003

Cover

Abstract TM732%TP181; 微网在分布式新能源消纳、负荷优化、提高能源利用效率等方面具有重要作用.但新能源出力的间歇性、负荷侧用电行为的随机性导致微网成为一个动态的复杂系统,难以通过准确的物理模型刻画,给微网优化运行带来巨大挑战.深度强化学习(deep reinforcement learning,DRL)通过与环境交互试错寻找最优策略,不依赖于新能源出力和负荷的精确建模,适用于解决序贯决策问题,在求解含有大量不确定性的微网优化运行难题时具有优势.为此,从DRL原理、DRL在单个微网以及微网群优化运行中的应用进行了综述与分析,最后对应用中所面临的算法可解释性、奖励函数设置、用户隐私性等方面进行了展望.
AbstractList 微网在分布式新能源消纳、负荷优化、提高能源利用效率等方面具有重要作用。但新能源出力的间歇性、负荷侧用电行为的随机性导致微网成为一个动态的复杂系统,难以通过准确的物理模型刻画,给微网优化运行带来巨大挑战。深度强化学习(deep reinforcement learning,DRL)通过与环境交互试错寻找最优策略,不依赖于新能源出力和负荷的精确建模,适用于解决序贯决策问题,在求解含有大量不确定性的微网优化运行难题时具有优势。为此,从DRL原理、DRL在单个微网以及微网群优化运行中的应用进行了综述与分析,最后对应用中所面临的算法可解释性、奖励函数设置、用户隐私性等方面进行了展望。
TM732%TP181; 微网在分布式新能源消纳、负荷优化、提高能源利用效率等方面具有重要作用.但新能源出力的间歇性、负荷侧用电行为的随机性导致微网成为一个动态的复杂系统,难以通过准确的物理模型刻画,给微网优化运行带来巨大挑战.深度强化学习(deep reinforcement learning,DRL)通过与环境交互试错寻找最优策略,不依赖于新能源出力和负荷的精确建模,适用于解决序贯决策问题,在求解含有大量不确定性的微网优化运行难题时具有优势.为此,从DRL原理、DRL在单个微网以及微网群优化运行中的应用进行了综述与分析,最后对应用中所面临的算法可解释性、奖励函数设置、用户隐私性等方面进行了展望.
Author 陈盛
周翔
王新迎
王继业
AuthorAffiliation 中国电力科学研究院有限公司,北京市 海淀区100192%国网数字科技控股有限公司,北京市西城区 100053
AuthorAffiliation_xml – name: 中国电力科学研究院有限公司,北京市 海淀区100192%国网数字科技控股有限公司,北京市西城区 100053
Author_FL WANG Xinying
WANG Jiye
CHEN Sheng
ZHOU Xiang
Author_FL_xml – sequence: 1
  fullname: ZHOU Xiang
– sequence: 2
  fullname: WANG Jiye
– sequence: 3
  fullname: CHEN Sheng
– sequence: 4
  fullname: WANG Xinying
Author_xml – sequence: 1
  fullname: 周翔
– sequence: 2
  fullname: 王继业
– sequence: 3
  fullname: 陈盛
– sequence: 4
  fullname: 王新迎
BookMark eNo9kLtKA0EYhaeIYIx5Dy12ncveppTgJRCwST_MNW6Ms2ZXCektg2gjYqM26RStxDWal8maPIarEeHnHPiKj8O_Bio2sRqATQRdREPob3VdaY9iN84yiyENHB9h38UQExeWB0kFVP_5KqhnWSygj0hAIxpWASnu8ll-8fX6UuTjYpIXo-vicTx7u5_fnhefT_OPq9nkpoSL6eXiYTR_nyymz-tgxfBeput_XQPt3Z12Y99pHew1G9stR1GKHSE8ZHiEFMbIo4EnhSRYRoERBBtPC0FMIEmkYRhpH0vNkUIcUh1ySajRAamB5lKrEt5lJ2l8zNMhS3jMfkGSdhhPT2PZ00wZTpDylaYk9IQxnHo4wiTEkRJQI1i6NpauAbeG2w7rJmepLcezft8OD3uDn4dBAsv8BioSejA
ClassificationCodes TM732%TP181
ContentType Journal Article
Copyright Copyright © Wanfang Data Co. Ltd. All Rights Reserved.
Copyright_xml – notice: Copyright © Wanfang Data Co. Ltd. All Rights Reserved.
DBID 2B.
4A8
92I
93N
PSX
TCJ
DOA
DOI 10.19705/j.cnki.issn2096-5125.2023.03.003
DatabaseName Wanfang Data Journals - Hong Kong
WANFANG Data Centre
Wanfang Data Journals
万方数据期刊 - 香港版
China Online Journals (COJ)
China Online Journals (COJ)
DOAJ (Directory of Open Access Journals)
DatabaseTitleList

Database_xml – sequence: 1
  dbid: DOA
  name: DOAJ (selected full-text)
  url: https://www.doaj.org/
  sourceTypes: Open Website
DeliveryMethod fulltext_linktorsrc
DocumentTitle_FL Review of Microgrid Optimization Operation Based on Deep Reinforcement Learning
EndPage 257
ExternalDocumentID oai_doaj_org_article_dfa31d5de9374bffa942823728db0e10
qqnyhlw202303002
GrantInformation_xml – fundername: 国家电网有限公司总部科技项目
  funderid: (5700-202130263A-0-0-00)
GroupedDBID -0C
-SC
-S~
2B.
2RA
4A8
5VR
92I
92M
93N
9D9
9DC
AAITT
AFUIB
ALMA_UNASSIGNED_HOLDINGS
CAJEC
CQIGP
GROUPED_DOAJ
PB1
PB9
PSX
Q--
RT3
T8S
TCJ
U1F
U5C
ID FETCH-LOGICAL-d992-bb41fa81d2214964cbc32c86fb32f4ebb3f6c38e078e52cea1d1a09e7ac39fe63
IEDL.DBID DOA
ISSN 2096-5125
IngestDate Wed Aug 27 01:28:51 EDT 2025
Thu May 29 04:05:34 EDT 2025
IsDoiOpenAccess true
IsOpenAccess true
IsPeerReviewed true
IsScholarly true
Issue 3
Keywords 优化运行
深度强化学习
复杂系统
微网
Language Chinese
LinkModel DirectLink
MergedId FETCHMERGED-LOGICAL-d992-bb41fa81d2214964cbc32c86fb32f4ebb3f6c38e078e52cea1d1a09e7ac39fe63
OpenAccessLink https://doaj.org/article/dfa31d5de9374bffa942823728db0e10
PageCount 20
ParticipantIDs doaj_primary_oai_doaj_org_article_dfa31d5de9374bffa942823728db0e10
wanfang_journals_qqnyhlw202303002
PublicationCentury 2000
PublicationDate 2023-05-01
PublicationDateYYYYMMDD 2023-05-01
PublicationDate_xml – month: 05
  year: 2023
  text: 2023-05-01
  day: 01
PublicationDecade 2020
PublicationTitle 全球能源互联网
PublicationTitle_FL Journal of Global Energy Interconnection
PublicationYear 2023
Publisher 中国电力科学研究院有限公司,北京市 海淀区100192%国网数字科技控股有限公司,北京市西城区 100053
Editorial Office of Journal of Global Energy Interconnection
Publisher_xml – name: 中国电力科学研究院有限公司,北京市 海淀区100192%国网数字科技控股有限公司,北京市西城区 100053
– name: Editorial Office of Journal of Global Energy Interconnection
SSID ssib051369897
ssib035218720
ssj0002857220
ssib036435998
ssib035757067
ssib038075987
Score 2.3467693
Snippet TM732%TP181; 微网在分布式新能源消纳、负荷优化、提高能源利用效率等方面具有重要作用.但新能源出力的间歇性、负荷侧用电行为的随机性导致微网成为一个动态的复杂系统,难以通过准确的物理模型刻画,给微网优化运行带来巨大挑战.深度强化学习(deep reinforcement...
微网在分布式新能源消纳、负荷优化、提高能源利用效率等方面具有重要作用。但新能源出力的间歇性、负荷侧用电行为的随机性导致微网成为一个动态的复杂系统,难以通过准确的物理模型刻画,给微网优化运行带来巨大挑战。深度强化学习(deep reinforcement...
SourceID doaj
wanfang
SourceType Open Website
Aggregation Database
StartPage 238
SubjectTerms 优化运行
复杂系统
微网
深度强化学习
Title 基于深度强化学习的微网优化运行综述
URI https://d.wanfangdata.com.cn/periodical/qqnyhlw202303002
https://doaj.org/article/dfa31d5de9374bffa942823728db0e10
Volume 6
hasFullText 1
inHoldings 1
isFullTextHit
isPrint
link http://utb.summon.serialssolutions.com/2.0.0/link/0/eLvHCXMwrV29Sx1BEF_EItgExQSNRhRsLE5vv-9KFeUR0MqA3XH7FaPhkpcoYmpLEW0kpIk2rzNoFXy-xH_mne_9Gc7eHXqdTdpduGVnZnd-szfzG4RmiTAA6kUc-F9UAXPCBbFJbSAksdhSbpnxxclr66Lxnr3b5Ju1Vl8-J6ykBy4Ft2BcSrHhxoIfZcq5NAbATKgkkVGhLYurwjisBVNgSYAqcCSfgBAFUCJrPOUU_DCvBRqedZ3HT0CFY-obK8rH1xoScUkKjkdYTATgJfkLNFcU-8mQL2zP62znY3FsH-fnfWPykkCVVg0BisKgzKXZh5oPWx1GLyvwOb1YbnoEDXzfGkU0_9Xuto_v_1zn7VbeaedHZ_llq3tz3vt5mP_73ft72u38gMH-3Un_4qh32-nfXb1CG6srG8uNoGqlEBifXqoUwy4FaEoIRESCaaUp0ZFwihLHrFLUCU0jC3jBcqJtig1Ow9jKVNPYWUFfo8Hsc2bH0DS1zjATcQVQk3l6PTAB4WTssNVUaDyOlvxWky8lWUbi6auLAVBqUik1eU6p42imElRSHalvSbOZHWx92vdShYspJG_-x0ITaMh_sMxgnESDu1_37FtAGbtqqjCoB-fg16o
linkProvider Directory of Open Access Journals
openUrl ctx_ver=Z39.88-2004&ctx_enc=info%3Aofi%2Fenc%3AUTF-8&rfr_id=info%3Asid%2Fsummon.serialssolutions.com&rft_val_fmt=info%3Aofi%2Ffmt%3Akev%3Amtx%3Ajournal&rft.genre=article&rft.atitle=%E5%9F%BA%E4%BA%8E%E6%B7%B1%E5%BA%A6%E5%BC%BA%E5%8C%96%E5%AD%A6%E4%B9%A0%E7%9A%84%E5%BE%AE%E7%BD%91%E4%BC%98%E5%8C%96%E8%BF%90%E8%A1%8C%E7%BB%BC%E8%BF%B0&rft.jtitle=%E5%85%A8%E7%90%83%E8%83%BD%E6%BA%90%E4%BA%92%E8%81%94%E7%BD%91&rft.au=%E5%91%A8%E7%BF%94&rft.au=%E7%8E%8B%E7%BB%A7%E4%B8%9A&rft.au=%E9%99%88%E7%9B%9B&rft.au=%E7%8E%8B%E6%96%B0%E8%BF%8E&rft.date=2023-05-01&rft.pub=%E4%B8%AD%E5%9B%BD%E7%94%B5%E5%8A%9B%E7%A7%91%E5%AD%A6%E7%A0%94%E7%A9%B6%E9%99%A2%E6%9C%89%E9%99%90%E5%85%AC%E5%8F%B8%2C%E5%8C%97%E4%BA%AC%E5%B8%82+%E6%B5%B7%E6%B7%80%E5%8C%BA100192%25%E5%9B%BD%E7%BD%91%E6%95%B0%E5%AD%97%E7%A7%91%E6%8A%80%E6%8E%A7%E8%82%A1%E6%9C%89%E9%99%90%E5%85%AC%E5%8F%B8%2C%E5%8C%97%E4%BA%AC%E5%B8%82%E8%A5%BF%E5%9F%8E%E5%8C%BA+100053&rft.issn=2096-5125&rft.volume=6&rft.issue=3&rft.spage=238&rft.epage=257&rft_id=info:doi/10.19705%2Fj.cnki.issn2096-5125.2023.03.003&rft.externalDocID=qqnyhlw202303002
thumbnail_s http://utb.summon.serialssolutions.com/2.0.0/image/custom?url=http%3A%2F%2Fwww.wanfangdata.com.cn%2Fimages%2FPeriodicalImages%2Fqqnyhlw%2Fqqnyhlw.jpg