Real-time peer-to-peer (P2P) electricity markets dynamically adapt to fluctuations in renewable energy and variations in demand, maximizing economic benefits through instantaneous price responses while enhancing grid flexibility. However, scaling expert guidance for massive personalized prosumers poses critical challenges, including diverse decision-making demands and a lack of customized modeling frameworks. This paper proposes an integrated large language model-multi-agent reinforcement learning (LLM-MARL) framework for real-time P2P energy trading to address challenges such as the limited technical capability of prosumers, the lack of expert experience, and security issues of distribution networks. LLMs are introduced as experts to generate personalized strategies, guiding MARL under the centralized training with decentralized execution (CTDE) paradigm through imitation. To handle the scalability issues inherent in large-scale P2P networks, a differential attention-based critic network is introduced to efficiently extract key interaction features and enhance convergence. Experimental results demonstrate that LLM-generated strategies effectively substitute human experts. The proposed imitative expert MARL algorithms achieve significantly lower economic costs and voltage violation rates on test sets compared to baseline algorithms, while maintaining robust stability. This paper provides an effective solution for the real-time decision-making of the P2P electricity market by bridging expert knowledge with agent learning.


翻译:实时点对点(P2P)电力市场动态适应可再生能源波动与需求变化,通过即时价格响应最大化经济效益,同时增强电网灵活性。然而,为海量个性化产消者扩展专家指导面临关键挑战,包括多样化的决策需求以及缺乏定制化建模框架。本文提出一种集成大语言模型-多智能体强化学习(LLM-MARL)框架,用于实时P2P能源交易,以应对产消者技术能力有限、专家经验缺乏以及配电网安全等问题。该框架引入LLM作为专家生成个性化策略,通过模仿学习在集中训练分散执行(CTDE)范式下指导MARL。为处理大规模P2P网络固有的可扩展性问题,引入基于差分注意力的评论家网络,以高效提取关键交互特征并提升收敛性。实验结果表明,LLM生成的策略能有效替代人类专家。与基线算法相比,所提出的模仿专家MARL算法在测试集上实现了显著更低的经济成本与电压越限率,同时保持了鲁棒的稳定性。本文通过桥接专家知识与智能体学习,为P2P电力市场的实时决策提供了有效解决方案。

0
下载
关闭预览

相关内容

P2P:IEEE International Conference on Peer-to-Peer Computing。 Explanation:IEEE对等计算国际会议。 Publisher:IEEE。 SIT:http://dblp.uni-trier.de/db/conf/p2p/
多智能体强化学习中的稳健且高效的通信
专知会员服务
27+阅读 · 2025年11月17日
LLM/智能体作为数据分析师:综述
专知会员服务
39+阅读 · 2025年9月30日
自动驾驶中的多智能体强化学习综述
专知会员服务
49+阅读 · 2024年8月20日
多智能体深度强化学习研究进展
专知会员服务
78+阅读 · 2024年7月17日
《网络战仿真中的多智能体强化学习》最新42页报告
专知会员服务
49+阅读 · 2023年7月11日
「基于通信的多智能体强化学习」 进展综述
【综述】多智能体强化学习算法理论研究
深度强化学习实验室
18+阅读 · 2020年9月9日
多智能体强化学习(MARL)近年研究概览
PaperWeekly
39+阅读 · 2020年3月15日
智能时代如何构建金融反欺诈体系?
数据猿
12+阅读 · 2018年3月26日
基于强化学习的量化交易框架
机器学习研究会
30+阅读 · 2018年2月22日
【强化学习】强化学习+深度学习=人工智能
产业智能官
55+阅读 · 2017年8月11日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
7+阅读 · 2014年12月31日
国家自然科学基金
18+阅读 · 2009年12月31日
国家自然科学基金
50+阅读 · 2009年12月31日
Arxiv
0+阅读 · 2月11日
VIP会员
最新内容
军事域更好使用人工智能的实用指南
专知会员服务
8+阅读 · 10月22日
《衡量语言模型中的作战规划能力》
专知会员服务
13+阅读 · 10月20日
Maven智能系统:帕兰提尔军事人工智能平台详解
专知会员服务
15+阅读 · 10月20日
《测试自动化框架在敏捷软件开发中的角色》
专知会员服务
8+阅读 · 10月20日
俄罗斯如何拦截乌克兰无人机与巡航导弹
专知会员服务
12+阅读 · 10月15日
《武器-目标分配问题:精确与近似求解算法》
专知会员服务
16+阅读 · 10月15日
现代电磁战:集成式系统簇时代如何实现频谱优势
相关资讯
相关基金
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
7+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
7+阅读 · 2014年12月31日
国家自然科学基金
18+阅读 · 2009年12月31日
国家自然科学基金
50+阅读 · 2009年12月31日
Top
微信扫码咨询专知VIP会员