智能电网中基于多智能体强化学习的频谱分配算法
TN92; 针对智能电网中利用 5G网络承载多样化电力终端的业务需求,提出了一种基于多智能体强化学习的频谱分配算法.首先,基于智能电网中部署的集成接入回程系统,考虑智能电网中轻量化和非轻量化终端业务的不同通信需求,将频谱分配问题建模为最大化系统总能效的非凸混合整数规划.其次,将前述问题构建为一个部分可观测的马尔可夫决策过程并转换为完全协作的多智能体问题,进而提出了一种集中训练分布执行框架下基于多智能体近端策略优化的频谱分配算法.最后,通过仿真验证了所提算法的性能.仿真结果表明,所提算法具有更快的收敛速度,通过有效减少层内与层间干扰、平衡接入与回程链路速率,可以将系统总速率提高25.2%....
Saved in:
| Published in | 通信学报 Vol. 44; no. 9; pp. 12 - 24 |
|---|---|
| Main Authors | , , , , , |
| Format | Journal Article |
| Language | Chinese |
| Published |
东南大学移动通信全国重点实验室,江苏 南京 210096%东南大学软件学院,江苏 南京 211100%国网山东省电力公司信息通信公司,山东 济南 250001%国网山东省电力公司济南供电公司,山东 济南 250012
25.09.2023
|
| Subjects | |
| Online Access | Get full text |
| ISSN | 1000-436X |
| DOI | 10.11959/j.issn.1000-436x.2023179 |
Cover
Loading…
| Abstract | TN92; 针对智能电网中利用 5G网络承载多样化电力终端的业务需求,提出了一种基于多智能体强化学习的频谱分配算法.首先,基于智能电网中部署的集成接入回程系统,考虑智能电网中轻量化和非轻量化终端业务的不同通信需求,将频谱分配问题建模为最大化系统总能效的非凸混合整数规划.其次,将前述问题构建为一个部分可观测的马尔可夫决策过程并转换为完全协作的多智能体问题,进而提出了一种集中训练分布执行框架下基于多智能体近端策略优化的频谱分配算法.最后,通过仿真验证了所提算法的性能.仿真结果表明,所提算法具有更快的收敛速度,通过有效减少层内与层间干扰、平衡接入与回程链路速率,可以将系统总速率提高25.2%. |
|---|---|
| AbstractList | TN92; 针对智能电网中利用 5G网络承载多样化电力终端的业务需求,提出了一种基于多智能体强化学习的频谱分配算法.首先,基于智能电网中部署的集成接入回程系统,考虑智能电网中轻量化和非轻量化终端业务的不同通信需求,将频谱分配问题建模为最大化系统总能效的非凸混合整数规划.其次,将前述问题构建为一个部分可观测的马尔可夫决策过程并转换为完全协作的多智能体问题,进而提出了一种集中训练分布执行框架下基于多智能体近端策略优化的频谱分配算法.最后,通过仿真验证了所提算法的性能.仿真结果表明,所提算法具有更快的收敛速度,通过有效减少层内与层间干扰、平衡接入与回程链路速率,可以将系统总速率提高25.2%. |
| Author | 燕锋 徐霞 林晓薇 夏玮玮 沈连丰 李正浩 |
| AuthorAffiliation | 东南大学移动通信全国重点实验室,江苏 南京 210096%东南大学软件学院,江苏 南京 211100%国网山东省电力公司信息通信公司,山东 济南 250001%国网山东省电力公司济南供电公司,山东 济南 250012 |
| AuthorAffiliation_xml | – name: 东南大学移动通信全国重点实验室,江苏 南京 210096%东南大学软件学院,江苏 南京 211100%国网山东省电力公司信息通信公司,山东 济南 250001%国网山东省电力公司济南供电公司,山东 济南 250012 |
| Author_FL | YAN Feng SHEN Lianfeng XIA Weiwei XU Xia LI Zhenghao LIN Xiaowei |
| Author_FL_xml | – sequence: 1 fullname: YAN Feng – sequence: 2 fullname: LIN Xiaowei – sequence: 3 fullname: LI Zhenghao – sequence: 4 fullname: XU Xia – sequence: 5 fullname: XIA Weiwei – sequence: 6 fullname: SHEN Lianfeng |
| Author_xml | – sequence: 1 fullname: 燕锋 – sequence: 2 fullname: 林晓薇 – sequence: 3 fullname: 李正浩 – sequence: 4 fullname: 徐霞 – sequence: 5 fullname: 夏玮玮 – sequence: 6 fullname: 沈连丰 |
| BookMark | eNrjYmDJy89LZWBQNDTQMzS0NLXUz9LLLC7O0zM0MDDQNTE2q9AzMjAyNjS3ZGHghIlFcDDwFhdnJhmYGhqbmxkYG3IyOD2buetF897nU7Y-3zvxyY61T-fverKr7-mSWRDxJ3snP92z62nPtKdrlz3ZueD5rJaXiya-2LDxaUfby9be5-umP9s8lYeBNS0xpziVF0pzM4S6uYY4e-j6-Lt7Ojv66BYD7TfSNU8xTDZPNUwyN0g0tAQhi9RkM6Nk05QkYxPDVBNjSzPzZDOzpLQ0w6Rkc0szI0tzU0ODFONUczMLUzOLNCNjbgZViLnliXlpiXnp8Vn5pUV5QBvjSyoqkkC-NbAEWmQMABCBZv8 |
| ClassificationCodes | TN92 |
| ContentType | Journal Article |
| Copyright | Copyright © Wanfang Data Co. Ltd. All Rights Reserved. |
| Copyright_xml | – notice: Copyright © Wanfang Data Co. Ltd. All Rights Reserved. |
| DBID | 2B. 4A8 92I 93N PSX TCJ |
| DOI | 10.11959/j.issn.1000-436x.2023179 |
| DatabaseName | Wanfang Data Journals - Hong Kong WANFANG Data Centre Wanfang Data Journals 万方数据期刊 - 香港版 China Online Journals (COJ) China Online Journals (COJ) |
| DatabaseTitleList | |
| DeliveryMethod | fulltext_linktorsrc |
| DocumentTitle_FL | Spectrum allocation algorithm based on multi-agent reinforcement learning in smart grid |
| EndPage | 24 |
| ExternalDocumentID | txxb202309002 |
| GroupedDBID | -0Y 2B. 4A8 92I 93N ALMA_UNASSIGNED_HOLDINGS CCEZO CUBFJ GROUPED_DOAJ PSX TCJ |
| ID | FETCH-LOGICAL-s1002-7d1c7e1b70a19a19a8ec62c5db341e43967c66bff1bc796297510d3e768568f23 |
| ISSN | 1000-436X |
| IngestDate | Thu May 29 04:00:48 EDT 2025 |
| IsPeerReviewed | false |
| IsScholarly | true |
| Issue | 9 |
| Keywords | multi-agent reinforcement learning 集成接入回程 smart grid 频谱分配 integrated access and backhaul 智能电网 spectrum allocation 多智能体强化学习 |
| Language | Chinese |
| LinkModel | OpenURL |
| MergedId | FETCHMERGED-LOGICAL-s1002-7d1c7e1b70a19a19a8ec62c5db341e43967c66bff1bc796297510d3e768568f23 |
| PageCount | 13 |
| ParticipantIDs | wanfang_journals_txxb202309002 |
| PublicationCentury | 2000 |
| PublicationDate | 2023-09-25 |
| PublicationDateYYYYMMDD | 2023-09-25 |
| PublicationDate_xml | – month: 09 year: 2023 text: 2023-09-25 day: 25 |
| PublicationDecade | 2020 |
| PublicationTitle | 通信学报 |
| PublicationTitle_FL | Journal on Communications |
| PublicationYear | 2023 |
| Publisher | 东南大学移动通信全国重点实验室,江苏 南京 210096%东南大学软件学院,江苏 南京 211100%国网山东省电力公司信息通信公司,山东 济南 250001%国网山东省电力公司济南供电公司,山东 济南 250012 |
| Publisher_xml | – name: 东南大学移动通信全国重点实验室,江苏 南京 210096%东南大学软件学院,江苏 南京 211100%国网山东省电力公司信息通信公司,山东 济南 250001%国网山东省电力公司济南供电公司,山东 济南 250012 |
| SSID | ssib051376031 ssj0002912165 ssib058759023 ssib001102965 ssib023646527 ssib023168036 ssib036439991 ssib050281523 ssib000968473 |
| Score | 2.378593 |
| Snippet | TN92; 针对智能电网中利用... |
| SourceID | wanfang |
| SourceType | Aggregation Database |
| StartPage | 12 |
| Title | 智能电网中基于多智能体强化学习的频谱分配算法 |
| URI | https://d.wanfangdata.com.cn/periodical/txxb202309002 |
| Volume | 44 |
| hasFullText | 1 |
| inHoldings | 1 |
| isFullTextHit | |
| isPrint | |
| link | http://utb.summon.serialssolutions.com/2.0.0/link/0/eLvHCXMwtR1Na9RANJQWxIsoKn6WCs5p2ZqZZL6OyTZL8eCphd7KZnejpxXsFpZe_cCDCsUv2osi4q2iiKCL_Te73fZf-N5LNon9wFoQlpCZefM-J8l7szNvHOdmK27YhOuk6spEVzEbIT5ztpq03NhveNLTLcr2eUfNL_q3l-TSxNRGadXSajeeba4duq_kJFaFOrAr7pL9B8vmSKEC7sG-cAULw_VYNmaRYtayMGCRYcZj4RyLNLM-CyXeQNFyFkHRsACaJLN1AvbxaiKsCXxmg8Pw-NTdQ5iwRk2SmRqzinrNsUARjGWBS0QBoc8iKAoialjospBTL8CpsMnAPXEYRMxqJBp6LD38cuwfE5hLLAHyOgt4iZxiJmCBHI8RxGSAssROILQJixaQZ0wDBEMxDLJefHWpZY6UoAi_R_wALVuAgOiAxSX8IHpUniIRHq7nSLdT06DOFA2AEcmJ1Em_gS7JoLEYhgQDwpjDBQZNYRMYLCRjWBQ01Z0RqHREGKGMqPEADZPWADlRI0k4GhvNGTJTr5R4IuMHtQpE4RBYMiGPx7hBRoI6AQNT5WFgUcdg9-NTxgyCRDmXMB-tEhGEvMSUxqvhpaFNurPhWFMp43WEL5SosAvye5R-S71E7SDdSjYe0seEJKgIPNeD_x_G9xMjPBEBl7ufnHFemuDHv9uqvkene-YeSpohNXsT25K7kfVMHdc0F8FBl8hKSz4R4p8d4-_N4oPC04Oc9mWc7_Z6Mba6ltL0Tgmt0xUw2WxVNvMBfm15S74rbLFgQuB5eOAcF2XlKynySMfDQMgWabokhDkQSeT4JMfFesUCBWk05pny8ulzYbngdFBwrrFTzo2xvLeOkpa2ZnaSRuduKYpYOOucycL_mSB9l59zJtbunXfCnY3-7sPt0avvo-31wY-t4bv-oP9i-HEzrR9svxz-6g-fvRlufRr8fD_afLT3YX33y9fh0yd7j5-PPr_d-fb6grNYjxZq89XsbJvqCia9ruoWb-o2j7Xb4BZ_pt1UoilbMYQVbVCO0k2l4iThcVNbhfkPuNvy2loZqUwivIvOZOd-p33JmREN37S50uCs-X6LNyw3DTwWWAJ2kcTisjOdybycfbtWlv8w8ZW_AVx1Thev1WvOZPfBavs6xGLdeJpGxW8mRQ4J |
| linkProvider | Directory of Open Access Journals |
| openUrl | ctx_ver=Z39.88-2004&ctx_enc=info%3Aofi%2Fenc%3AUTF-8&rfr_id=info%3Asid%2Fsummon.serialssolutions.com&rft_val_fmt=info%3Aofi%2Ffmt%3Akev%3Amtx%3Ajournal&rft.genre=article&rft.atitle=%E6%99%BA%E8%83%BD%E7%94%B5%E7%BD%91%E4%B8%AD%E5%9F%BA%E4%BA%8E%E5%A4%9A%E6%99%BA%E8%83%BD%E4%BD%93%E5%BC%BA%E5%8C%96%E5%AD%A6%E4%B9%A0%E7%9A%84%E9%A2%91%E8%B0%B1%E5%88%86%E9%85%8D%E7%AE%97%E6%B3%95&rft.jtitle=%E9%80%9A%E4%BF%A1%E5%AD%A6%E6%8A%A5&rft.au=%E7%87%95%E9%94%8B&rft.au=%E6%9E%97%E6%99%93%E8%96%87&rft.au=%E6%9D%8E%E6%AD%A3%E6%B5%A9&rft.au=%E5%BE%90%E9%9C%9E&rft.date=2023-09-25&rft.pub=%E4%B8%9C%E5%8D%97%E5%A4%A7%E5%AD%A6%E7%A7%BB%E5%8A%A8%E9%80%9A%E4%BF%A1%E5%85%A8%E5%9B%BD%E9%87%8D%E7%82%B9%E5%AE%9E%E9%AA%8C%E5%AE%A4%2C%E6%B1%9F%E8%8B%8F+%E5%8D%97%E4%BA%AC+210096%25%E4%B8%9C%E5%8D%97%E5%A4%A7%E5%AD%A6%E8%BD%AF%E4%BB%B6%E5%AD%A6%E9%99%A2%2C%E6%B1%9F%E8%8B%8F+%E5%8D%97%E4%BA%AC+211100%25%E5%9B%BD%E7%BD%91%E5%B1%B1%E4%B8%9C%E7%9C%81%E7%94%B5%E5%8A%9B%E5%85%AC%E5%8F%B8%E4%BF%A1%E6%81%AF%E9%80%9A%E4%BF%A1%E5%85%AC%E5%8F%B8%2C%E5%B1%B1%E4%B8%9C+%E6%B5%8E%E5%8D%97+250001%25%E5%9B%BD%E7%BD%91%E5%B1%B1%E4%B8%9C%E7%9C%81%E7%94%B5%E5%8A%9B%E5%85%AC%E5%8F%B8%E6%B5%8E%E5%8D%97%E4%BE%9B%E7%94%B5%E5%85%AC%E5%8F%B8%2C%E5%B1%B1%E4%B8%9C+%E6%B5%8E%E5%8D%97+250012&rft.issn=1000-436X&rft.volume=44&rft.issue=9&rft.spage=12&rft.epage=24&rft_id=info:doi/10.11959%2Fj.issn.1000-436x.2023179&rft.externalDocID=txxb202309002 |
| thumbnail_s | http://utb.summon.serialssolutions.com/2.0.0/image/custom?url=http%3A%2F%2Fwww.wanfangdata.com.cn%2Fimages%2FPeriodicalImages%2Ftxxb%2Ftxxb.jpg |