Energy forecasting research faces a persistent comparability gap that makes it difficult to measure consistent progress over time. Reported accuracy gains are often not directly comparable because models are evaluated under study-specific datasets, time periods, information sets, and scoring setups, while widely used benchmarks and competition datasets are typically tied to fixed historical windows. This paper introduces the Energy-Arena, a dynamic benchmarking platform for operational energy time series forecasting that provides a continuously updated reference point as energy systems evolve. The platform operates as an open, API-based submission system and standardizes challenge definitions and submission deadlines aligned with operational constraints. Performance is reported on rolling evaluation windows via persistent leaderboards. By moving from retrospective backtesting to forward-looking benchmarking, the Energy-Arena enforces standardized ex-ante submission and ex-post evaluation, thereby improving transparency by preventing information leakage and retroactive tuning. The platform is publicly available at Energy-Arena.org.


翻译:能源预测研究长期面临比较性差距问题,导致难以衡量该领域随时间推移的持续进展。由于模型通常基于特定研究数据集、时段、信息集及评分框架进行评估,而广泛使用的基准测试与竞赛数据集又往往绑定固定历史窗口,因此报告的性能提升往往缺乏直接可比性。本文提出能源竞技场(Energy-Arena)——一个面向运营性能源时间序列预测的动态基准测试平台,能够随能源系统的演进提供持续更新的参照基准。该平台采用基于API的开放式提交系统,通过整合运营约束条件标准化挑战定义与截止时间。性能指标通过滚动评估窗口及持续更新的排行榜进行报告。通过从回溯性回测转向前瞻性基准测试,能源竞技场强制执行标准化的事前提交与事后评估机制,从而在防止信息泄露与参数回溯性调整的同时提升透明度。该平台现已通过Energy-Arena.org公开访问。

0
下载
关闭预览

相关内容

电力人工智能技术研究框架、应用现状及展望
专知会员服务
17+阅读 · 2025年5月15日
深度学习在电力系统预测中的应用
专知会员服务
44+阅读 · 2023年1月31日
深度预测学习:模型与应用
专知会员服务
49+阅读 · 2022年12月5日
达观智能制造知识图谱平台电力能源行业应用方案
专知会员服务
52+阅读 · 2022年4月13日
面向多智能体博弈对抗的对手建模框架
专知
18+阅读 · 2022年9月28日
【大数据】海量数据分析能力形成和大数据关键技术
产业智能官
17+阅读 · 2018年10月29日
GIS最新热点以及未来发展热门
人工智能学家
10+阅读 · 2018年3月29日
15款免费预测分析软件!收藏好,别丢了!
七月在线实验室
11+阅读 · 2018年2月27日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
7+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
Deep Learning for Energy Markets
Arxiv
11+阅读 · 2019年4月10日
VIP会员
最新内容
美国从乌克兰无人机战争中学习经验
专知会员服务
7+阅读 · 6月21日
ICML 2026 | 面向视觉语言模型的语义鲁棒性认证
专知会员服务
5+阅读 · 6月21日
学习数据的几何:形状空间分析数学综述
专知会员服务
10+阅读 · 6月17日
定向能反无人机系统最新发展动态
专知会员服务
12+阅读 · 6月17日
相关基金
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
0+阅读 · 2014年12月31日
国家自然科学基金
7+阅读 · 2014年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
国家自然科学基金
2+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员