Wie gut waren die Prognosen an echten Tagen, verglichen mit einfachen Faustregeln? Nur live ausgegebene Prognosen zählen.
7 Tage
2026-10-13 – 2026-10-19
Für morgen (D+1)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
7 / 7
46,6
64,4
0
16,0
75 %
lear.v1
7 / 7
30,7
39,8
+0,34
9,2
77 %
naive_last_day.v1
7 / 7
32,5
41,6
+0,30
10,8
82 %
gbm.v1
7 / 7
39,0
45,5
+0,16
11,7
67 %
naive_weekly.v1
7 / 7
66,5
84,9
−0,43
22,3
59 %
Für übermorgen (D+2)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
7 / 7
53,2
68,1
0
16,8
72 %
naive_last_day.v1
7 / 7
40,1
48,0
+0,25
13,0
80 %
gbm.v1
7 / 7
44,0
52,8
+0,17
13,4
67 %
lear.v1
7 / 7
47,4
55,0
+0,11
12,5
79 %
naive_weekly.v1
7 / 7
66,5
84,9
−0,25
22,5
57 %
MAE, RMSE und Pinball in €/MWh je Viertelstunde (10 €/MWh = 1 ct/kWh). Skill = 1 − MAE ÷ MAE der Referenz: über 0 heißt besser als die Faustregel. Beim 80-%-Band sollten etwa 80 % der Preise im Band liegen.
Nach Situation
Für morgen (D+1), MAE
Modell
Alle Viertelstunden
Werktage
Wochenende
Negative Preise
Preisspitzen
gbm.v1
39,0672
43,5480
27,6192
–
70,868
lear.v1
30,7672
29,0480
34,7192
–
45,468
naive_last_day.v1
32,5672
32,5480
32,3192
–
49,868
naive_similar_day.v1
46,6672
29,2480
90,1192
–
35,168
naive_weekly.v1
66,5672
57,0480
90,1192
–
71,268
Für übermorgen (D+2), MAE
Modell
Alle Viertelstunden
Werktage
Wochenende
Negative Preise
Preisspitzen
gbm.v1
44,0672
50,3480
28,3192
–
77,868
lear.v1
47,4672
45,7480
51,6192
–
65,868
naive_last_day.v1
40,1672
43,1480
32,4192
–
41,268
naive_similar_day.v1
53,2672
38,4480
90,1192
–
25,268
naive_weekly.v1
66,5672
57,0480
90,1192
–
71,268
Preisspitze: tatsächlicher Preis ab 248 €/MWh (oberste 10 % im Zeitraum).
Ist der Unterschied echt?
Diebold-Mariano-Test auf die täglichen Fehler, paarweise, zweiseitig. Ein kleiner p-Wert heißt: Der Unterschied ist kaum Zufall. Mit wenigen Tagen ist der Test schwach.
A
B
D+
n
p
gbm.v1
lear.v1
1
7
–
zu wenige Tage (7)
gbm.v1
naive_last_day.v1
1
7
–
zu wenige Tage (7)
gbm.v1
naive_similar_day.v1
1
7
–
zu wenige Tage (7)
gbm.v1
naive_weekly.v1
1
7
–
zu wenige Tage (7)
lear.v1
naive_last_day.v1
1
7
–
zu wenige Tage (7)
lear.v1
naive_similar_day.v1
1
7
–
zu wenige Tage (7)
lear.v1
naive_weekly.v1
1
7
–
zu wenige Tage (7)
naive_last_day.v1
naive_similar_day.v1
1
7
–
zu wenige Tage (7)
naive_last_day.v1
naive_weekly.v1
1
7
–
zu wenige Tage (7)
naive_similar_day.v1
naive_weekly.v1
1
7
–
zu wenige Tage (7)
gbm.v1
lear.v1
2
7
–
zu wenige Tage (7)
gbm.v1
naive_last_day.v1
2
7
–
zu wenige Tage (7)
gbm.v1
naive_similar_day.v1
2
7
–
zu wenige Tage (7)
gbm.v1
naive_weekly.v1
2
7
–
zu wenige Tage (7)
lear.v1
naive_last_day.v1
2
7
–
zu wenige Tage (7)
lear.v1
naive_similar_day.v1
2
7
–
zu wenige Tage (7)
lear.v1
naive_weekly.v1
2
7
–
zu wenige Tage (7)
naive_last_day.v1
naive_similar_day.v1
2
7
–
zu wenige Tage (7)
naive_last_day.v1
naive_weekly.v1
2
7
–
zu wenige Tage (7)
naive_similar_day.v1
naive_weekly.v1
2
7
–
zu wenige Tage (7)
30 Tage
2026-10-01 – 2026-10-19
Für morgen (D+1)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
19 / 18
47,8
63,9
0
16,1
69 %
lear.v1
19 / 17
29,2
37,8
+0,39
8,9
77 %
gbm.v1
19 / 17
30,4
37,8
+0,36
9,7
78 %
naive_last_day.v1
19 / 17
37,2
48,9
+0,22
12,5
72 %
naive_weekly.v1
19 / 18
61,3
78,4
−0,28
20,7
62 %
Für übermorgen (D+2)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
18 / 17
56,8
72,3
0
18,9
68 %
gbm.v1
18 / 16
33,9
42,8
+0,41
10,9
79 %
lear.v1
18 / 16
46,1
54,2
+0,20
13,4
72 %
naive_last_day.v1
18 / 16
49,0
62,6
+0,15
16,1
74 %
naive_weekly.v1
18 / 17
63,2
80,0
−0,11
21,5
59 %
MAE, RMSE und Pinball in €/MWh je Viertelstunde (10 €/MWh = 1 ct/kWh). Skill = 1 − MAE ÷ MAE der Referenz: über 0 heißt besser als die Faustregel. Beim 80-%-Band sollten etwa 80 % der Preise im Band liegen.
Nach Situation
Für morgen (D+1), MAE
Modell
Alle Viertelstunden
Werktage
Wochenende
Negative Preise
Preisspitzen
gbm.v1
30,41632
32,11152
26,2480
28,31
47,8167
lear.v1
29,21632
29,11152
29,3480
13,61
44,0167
naive_last_day.v1
37,21632
39,11152
32,7480
29,61
49,9167
naive_similar_day.v1
47,81728
36,41152
70,5576
98,01
41,0167
naive_weekly.v1
61,31728
56,61152
70,5576
98,01
60,5167
Für übermorgen (D+2), MAE
Modell
Alle Viertelstunden
Werktage
Wochenende
Negative Preise
Preisspitzen
gbm.v1
33,91536
39,0960
25,4576
31,61
59,0125
lear.v1
46,11536
42,8960
51,6576
47,51
64,4125
naive_last_day.v1
49,01536
50,5960
46,5576
95,61
47,5125
naive_similar_day.v1
56,81632
49,31056
70,5576
98,01
40,5146
naive_weekly.v1
63,21632
59,11056
70,5576
98,01
67,1146
Preisspitze: tatsächlicher Preis ab 243 €/MWh (oberste 10 % im Zeitraum).
Ist der Unterschied echt?
Diebold-Mariano-Test auf die täglichen Fehler, paarweise, zweiseitig. Ein kleiner p-Wert heißt: Der Unterschied ist kaum Zufall. Mit wenigen Tagen ist der Test schwach.
A
B
D+
n
p
gbm.v1
lear.v1
1
17
0,7735
kein belegter Unterschied
gbm.v1
naive_last_day.v1
1
17
0,1929
kein belegter Unterschied
gbm.v1
naive_similar_day.v1
1
17
0,0463
gbm.v1 ist besser als naive_similar_day.v1
gbm.v1
naive_weekly.v1
1
17
0,0012
gbm.v1 ist besser als naive_weekly.v1
lear.v1
naive_last_day.v1
1
17
0,1486
kein belegter Unterschied
lear.v1
naive_similar_day.v1
1
17
0,0329
lear.v1 ist besser als naive_similar_day.v1
lear.v1
naive_weekly.v1
1
17
0,0026
lear.v1 ist besser als naive_weekly.v1
naive_last_day.v1
naive_similar_day.v1
1
17
0,1584
kein belegter Unterschied
naive_last_day.v1
naive_weekly.v1
1
17
0,0146
naive_last_day.v1 ist besser als naive_weekly.v1
naive_similar_day.v1
naive_weekly.v1
1
18
0,0611
kein belegter Unterschied
gbm.v1
lear.v1
2
16
0,0275
gbm.v1 ist besser als lear.v1
gbm.v1
naive_last_day.v1
2
16
0,2101
kein belegter Unterschied
gbm.v1
naive_similar_day.v1
2
16
0,0451
gbm.v1 ist besser als naive_similar_day.v1
gbm.v1
naive_weekly.v1
2
16
0,0079
gbm.v1 ist besser als naive_weekly.v1
lear.v1
naive_last_day.v1
2
16
0,7700
kein belegter Unterschied
lear.v1
naive_similar_day.v1
2
16
0,2467
kein belegter Unterschied
lear.v1
naive_weekly.v1
2
16
0,0807
kein belegter Unterschied
naive_last_day.v1
naive_similar_day.v1
2
16
0,2241
kein belegter Unterschied
naive_last_day.v1
naive_weekly.v1
2
16
0,2167
kein belegter Unterschied
naive_similar_day.v1
naive_weekly.v1
2
17
0,3385
kein belegter Unterschied
90 Tage
2026-10-01 – 2026-10-19
Für morgen (D+1)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
19 / 18
47,8
63,9
0
16,1
69 %
lear.v1
19 / 17
29,2
37,8
+0,39
8,9
77 %
gbm.v1
19 / 17
30,4
37,8
+0,36
9,7
78 %
naive_last_day.v1
19 / 17
37,2
48,9
+0,22
12,5
72 %
naive_weekly.v1
19 / 18
61,3
78,4
−0,28
20,7
62 %
Für übermorgen (D+2)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
18 / 17
56,8
72,3
0
18,9
68 %
gbm.v1
18 / 16
33,9
42,8
+0,41
10,9
79 %
lear.v1
18 / 16
46,1
54,2
+0,20
13,4
72 %
naive_last_day.v1
18 / 16
49,0
62,6
+0,15
16,1
74 %
naive_weekly.v1
18 / 17
63,2
80,0
−0,11
21,5
59 %
MAE, RMSE und Pinball in €/MWh je Viertelstunde (10 €/MWh = 1 ct/kWh). Skill = 1 − MAE ÷ MAE der Referenz: über 0 heißt besser als die Faustregel. Beim 80-%-Band sollten etwa 80 % der Preise im Band liegen.
Nach Situation
Für morgen (D+1), MAE
Modell
Alle Viertelstunden
Werktage
Wochenende
Negative Preise
Preisspitzen
gbm.v1
30,41632
32,11152
26,2480
28,31
47,8167
lear.v1
29,21632
29,11152
29,3480
13,61
44,0167
naive_last_day.v1
37,21632
39,11152
32,7480
29,61
49,9167
naive_similar_day.v1
47,81728
36,41152
70,5576
98,01
41,0167
naive_weekly.v1
61,31728
56,61152
70,5576
98,01
60,5167
Für übermorgen (D+2), MAE
Modell
Alle Viertelstunden
Werktage
Wochenende
Negative Preise
Preisspitzen
gbm.v1
33,91536
39,0960
25,4576
31,61
59,0125
lear.v1
46,11536
42,8960
51,6576
47,51
64,4125
naive_last_day.v1
49,01536
50,5960
46,5576
95,61
47,5125
naive_similar_day.v1
56,81632
49,31056
70,5576
98,01
40,5146
naive_weekly.v1
63,21632
59,11056
70,5576
98,01
67,1146
Preisspitze: tatsächlicher Preis ab 243 €/MWh (oberste 10 % im Zeitraum).
Ist der Unterschied echt?
Diebold-Mariano-Test auf die täglichen Fehler, paarweise, zweiseitig. Ein kleiner p-Wert heißt: Der Unterschied ist kaum Zufall. Mit wenigen Tagen ist der Test schwach.
A
B
D+
n
p
gbm.v1
lear.v1
1
17
0,7735
kein belegter Unterschied
gbm.v1
naive_last_day.v1
1
17
0,1929
kein belegter Unterschied
gbm.v1
naive_similar_day.v1
1
17
0,0463
gbm.v1 ist besser als naive_similar_day.v1
gbm.v1
naive_weekly.v1
1
17
0,0012
gbm.v1 ist besser als naive_weekly.v1
lear.v1
naive_last_day.v1
1
17
0,1486
kein belegter Unterschied
lear.v1
naive_similar_day.v1
1
17
0,0329
lear.v1 ist besser als naive_similar_day.v1
lear.v1
naive_weekly.v1
1
17
0,0026
lear.v1 ist besser als naive_weekly.v1
naive_last_day.v1
naive_similar_day.v1
1
17
0,1584
kein belegter Unterschied
naive_last_day.v1
naive_weekly.v1
1
17
0,0146
naive_last_day.v1 ist besser als naive_weekly.v1
naive_similar_day.v1
naive_weekly.v1
1
18
0,0611
kein belegter Unterschied
gbm.v1
lear.v1
2
16
0,0275
gbm.v1 ist besser als lear.v1
gbm.v1
naive_last_day.v1
2
16
0,2101
kein belegter Unterschied
gbm.v1
naive_similar_day.v1
2
16
0,0451
gbm.v1 ist besser als naive_similar_day.v1
gbm.v1
naive_weekly.v1
2
16
0,0079
gbm.v1 ist besser als naive_weekly.v1
lear.v1
naive_last_day.v1
2
16
0,7700
kein belegter Unterschied
lear.v1
naive_similar_day.v1
2
16
0,2467
kein belegter Unterschied
lear.v1
naive_weekly.v1
2
16
0,0807
kein belegter Unterschied
naive_last_day.v1
naive_similar_day.v1
2
16
0,2241
kein belegter Unterschied
naive_last_day.v1
naive_weekly.v1
2
16
0,2167
kein belegter Unterschied
naive_similar_day.v1
naive_weekly.v1
2
17
0,3385
kein belegter Unterschied
Gesamt
2026-10-01 – 2026-10-19
Für morgen (D+1)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
19 / 18
47,8
63,9
0
16,1
69 %
lear.v1
19 / 17
29,2
37,8
+0,39
8,9
77 %
gbm.v1
19 / 17
30,4
37,8
+0,36
9,7
78 %
naive_last_day.v1
19 / 17
37,2
48,9
+0,22
12,5
72 %
naive_weekly.v1
19 / 18
61,3
78,4
−0,28
20,7
62 %
Für übermorgen (D+2)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
18 / 17
56,8
72,3
0
18,9
68 %
gbm.v1
18 / 16
33,9
42,8
+0,41
10,9
79 %
lear.v1
18 / 16
46,1
54,2
+0,20
13,4
72 %
naive_last_day.v1
18 / 16
49,0
62,6
+0,15
16,1
74 %
naive_weekly.v1
18 / 17
63,2
80,0
−0,11
21,5
59 %
MAE, RMSE und Pinball in €/MWh je Viertelstunde (10 €/MWh = 1 ct/kWh). Skill = 1 − MAE ÷ MAE der Referenz: über 0 heißt besser als die Faustregel. Beim 80-%-Band sollten etwa 80 % der Preise im Band liegen.
Nach Situation
Für morgen (D+1), MAE
Modell
Alle Viertelstunden
Werktage
Wochenende
Negative Preise
Preisspitzen
gbm.v1
30,41632
32,11152
26,2480
28,31
47,8167
lear.v1
29,21632
29,11152
29,3480
13,61
44,0167
naive_last_day.v1
37,21632
39,11152
32,7480
29,61
49,9167
naive_similar_day.v1
47,81728
36,41152
70,5576
98,01
41,0167
naive_weekly.v1
61,31728
56,61152
70,5576
98,01
60,5167
Für übermorgen (D+2), MAE
Modell
Alle Viertelstunden
Werktage
Wochenende
Negative Preise
Preisspitzen
gbm.v1
33,91536
39,0960
25,4576
31,61
59,0125
lear.v1
46,11536
42,8960
51,6576
47,51
64,4125
naive_last_day.v1
49,01536
50,5960
46,5576
95,61
47,5125
naive_similar_day.v1
56,81632
49,31056
70,5576
98,01
40,5146
naive_weekly.v1
63,21632
59,11056
70,5576
98,01
67,1146
Preisspitze: tatsächlicher Preis ab 243 €/MWh (oberste 10 % im Zeitraum).
Ist der Unterschied echt?
Diebold-Mariano-Test auf die täglichen Fehler, paarweise, zweiseitig. Ein kleiner p-Wert heißt: Der Unterschied ist kaum Zufall. Mit wenigen Tagen ist der Test schwach.
A
B
D+
n
p
gbm.v1
lear.v1
1
17
0,7735
kein belegter Unterschied
gbm.v1
naive_last_day.v1
1
17
0,1929
kein belegter Unterschied
gbm.v1
naive_similar_day.v1
1
17
0,0463
gbm.v1 ist besser als naive_similar_day.v1
gbm.v1
naive_weekly.v1
1
17
0,0012
gbm.v1 ist besser als naive_weekly.v1
lear.v1
naive_last_day.v1
1
17
0,1486
kein belegter Unterschied
lear.v1
naive_similar_day.v1
1
17
0,0329
lear.v1 ist besser als naive_similar_day.v1
lear.v1
naive_weekly.v1
1
17
0,0026
lear.v1 ist besser als naive_weekly.v1
naive_last_day.v1
naive_similar_day.v1
1
17
0,1584
kein belegter Unterschied
naive_last_day.v1
naive_weekly.v1
1
17
0,0146
naive_last_day.v1 ist besser als naive_weekly.v1
naive_similar_day.v1
naive_weekly.v1
1
18
0,0611
kein belegter Unterschied
gbm.v1
lear.v1
2
16
0,0275
gbm.v1 ist besser als lear.v1
gbm.v1
naive_last_day.v1
2
16
0,2101
kein belegter Unterschied
gbm.v1
naive_similar_day.v1
2
16
0,0451
gbm.v1 ist besser als naive_similar_day.v1
gbm.v1
naive_weekly.v1
2
16
0,0079
gbm.v1 ist besser als naive_weekly.v1
lear.v1
naive_last_day.v1
2
16
0,7700
kein belegter Unterschied
lear.v1
naive_similar_day.v1
2
16
0,2467
kein belegter Unterschied
lear.v1
naive_weekly.v1
2
16
0,0807
kein belegter Unterschied
naive_last_day.v1
naive_similar_day.v1
2
16
0,2241
kein belegter Unterschied
naive_last_day.v1
naive_weekly.v1
2
16
0,2167
kein belegter Unterschied
naive_similar_day.v1
naive_weekly.v1
2
17
0,3385
kein belegter Unterschied
Täglicher Fehler (MAE, D+1)
Trefferbilanz der günstigsten 3 Stunden
Modell
D+
n
Treffer
angegeben
höchstens 0,5 ct teurer
angegeben
Mehrkosten ggü. bestem Fenster
Ersparnis ggü. Tagesmittel
gbm.v1
1
17
29 %
30 %
82 %
85 %
0,27 ct
6,25 ct
gbm.v1
2
16
6 %
23 %
94 %
72 %
0,16 ct
6,73 ct
lear.v1
1
17
24 %
23 %
88 %
75 %
0,31 ct
6,22 ct
lear.v1
2
16
25 %
22 %
88 %
79 %
0,24 ct
6,65 ct
naive_last_day.v1
1
17
6 %
22 %
82 %
58 %
0,45 ct
6,08 ct
naive_last_day.v1
2
16
12 %
21 %
88 %
56 %
0,31 ct
6,58 ct
naive_similar_day.v1
1
18
6 %
23 %
89 %
61 %
0,40 ct
6,33 ct
naive_similar_day.v1
2
17
6 %
27 %
88 %
66 %
0,37 ct
6,42 ct
naive_weekly.v1
1
18
0 %
26 %
83 %
60 %
0,39 ct
6,34 ct
naive_weekly.v1
2
17
0 %
24 %
82 %
58 %
0,41 ct
6,38 ct
Verpasste Prognosen
Do 01.10.: naive_last_day.v1, D+1
Do 01.10.: naive_weekly.v1, D+1
Do 01.10.: naive_similar_day.v1, D+1
Do 01.10.: lear.v1, D+1
Do 01.10.: gbm.v1, D+1
Fr 02.10.: naive_last_day.v1, D+2
Fr 02.10.: naive_weekly.v1, D+2
Fr 02.10.: naive_similar_day.v1, D+2
Fr 02.10.: lear.v1, D+2
Fr 02.10.: gbm.v1, D+2
So 11.10.: naive_last_day.v1, D+1
So 11.10.: lear.v1, D+1
So 11.10.: gbm.v1, D+1
Mo 12.10.: naive_last_day.v1, D+2
Mo 12.10.: lear.v1, D+2
Mo 12.10.: gbm.v1, D+2
Backtest – nicht Teil der Bilanz
Derselbe Code, rückwirkend für 363 vergangene Tage (1. Oktober 2025 bis 28. September 2026), jeweils nur mit den Daten, die damals bekannt waren. Er ist nicht vorab festgelegt und deshalb optimistisch. Er zeigt, warum ein Modell live läuft, nicht dass es gut ist.
Für morgen (D+1)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
363 / 363
32,7
52,1
0
12,0
76 %
gbm.v1
363 / 363
19,3
31,8
+0,41
6,4
78 %
lear.v1
363 / 363
22,0
36,4
+0,33
7,6
76 %
naive_last_day.v1
363 / 363
30,2
48,9
+0,07
11,0
77 %
naive_weekly.v1
363 / 363
37,8
58,8
−0,16
13,5
77 %
Für übermorgen (D+2)
Modell
Tage fällig / prognostiziert
MAE
RMSE
Skill
Pinball
im 80-%-Band
naive_similar_day.v1 Referenz
363 / 363
37,9
59,5
0
13,7
76 %
gbm.v1
363 / 363
21,8
34,7
+0,43
7,2
78 %
lear.v1
363 / 363
29,2
44,0
+0,23
9,9
76 %
naive_weekly.v1
363 / 363
37,8
58,8
+0,00
13,5
76 %
naive_last_day.v1
363 / 363
38,5
59,9
−0,02
13,6
77 %
MAE, RMSE und Pinball in €/MWh je Viertelstunde (10 €/MWh = 1 ct/kWh). Skill = 1 − MAE ÷ MAE der Referenz: über 0 heißt besser als die Faustregel. Beim 80-%-Band sollten etwa 80 % der Preise im Band liegen. GitHub