In diesem Artikel
Nach diesem Artikel kannst du …
- Vollständige Trainings-/Bewertungspaare korrekt zählen.
- Sampleindex und vollständigen Labelhorizont unterscheiden.
- WFE zusammen mit zugrunde liegenden Renditen interpretieren.
- Vorab-Auswahl und verbundene Equity gegen nachträgliches Optimieren abgrenzen.
Begriffe direkt erklärt
Backtesting Drawdown Maximaler DrawdownEine Walk-Forward-Analyse wählt Parameter aus zulässigen früheren Daten und bewertet sie danach eingefroren auf einem späteren Abschnitt. Das Verfahren umfasst auch Kalender, Auswahlregel und Zustandsübergänge. Lege diese vor den Bewertungsergebnissen fest. Andernfalls kann selbst ein als Out-of-Sample bezeichnetes Ergebnis die Gestaltung des Tests rückwirkend beeinflussen.
Aktualisierungsregel zuerst definieren
Bestimme Trainingslänge, Prüflänge, Aktualisierungsintervall, Kandidaten, Kriterium, Gleichstandsauflösung und Verhalten, wenn kein Kandidat qualifiziert ist. Maximaler Gewinn ist ein gewähltes Kriterium, keine neutrale Vorgabe. Kosten, Exposition und Anzahl müssen konsistent sein. Speichere sämtliche Auswahlversuche, auch verworfene Regeln.
Viele Varianten können historische Zufälle auswählen. Eine Trefferquote über 75 % in zweihundert Trades oder Profit Factor über 3,5 diagnostiziert allein jedoch kein Curve-Fitting. Untersuche Datenverfügbarkeit, Kosten, Fillmodell und Auswahlhistorie. /de/praxis/python-forex-backtesting/ bietet dazu einzelne rekonstruierbare Gegenproben.
Jahresfenster richtig zählen
Unser hypothetischer Kalender trainiert auf 2018–2021 und bewertet 2022. Anschließend wird auf 2019–2022 trainiert und 2023 bewertet. In Daten von 2018 bis einschließlich 2023 liegen damit zwei vollständige Jahresbewertungen. Vier anfängliche Trainingsjahre plus fünf spätere Bewertungsjahre benötigen neun Jahre, nicht fünf.
Späteres Training darf einen früheren OOS-Block verwenden, wenn er dann tatsächlich historisch verfügbar ist; die ursprüngliche Chronologie wird dadurch nicht verändert. Überlappende Trainingsdaten und zeitnahe Marktperioden machen Fenster aber nicht statistisch unabhängig. Füge OOS-Trades chronologisch zusammen, untersuche Unsicherheit und reserviere eine letzte unberührte Bewertung, falls frühere Ergebnisse Designentscheidungen beeinflusst haben.
Rolling, expanding und vollständiger Labelhorizont
Rolling hält die Trainingslänge fest und entfernt alte Daten: im Beispiel 2018–2021, 2019–2022, 2020–2023. Anchored beziehungsweise expanding behält den Anfang und erweitert das Ende: 2018–2021, 2018–2022, 2018–2023. Weniger Gedächtnis entfernt ältere Bedingungen, verkleinert aber die Stichprobe. Mehr Gedächtnis erhält zusätzliche, möglicherweise andersartige Marktbeobachtungen. Keine Variante garantiert schnellere Anpassung oder stabile Parameter; Tradingstil allein bestimmt sie nicht.
Lerne Normalisierung, Merkmalsauswahl und Imputation ausschließlich aus erlaubten Trainingsdaten. Ein Sampleindex vor dem Test garantiert keine bekannte Zielvariable. Prüfe sämtliche Kurse und Veröffentlichungen, die zur Labelbildung erforderlich sind. TimeSeriesSplit entfernt mit gap Samples am Trainingsende; es erkennt nicht jede Leakagequelle. Gleichmäßige Abstände helfen vergleichbaren Foldlängen, während unregelmäßige Ereignisse einen eigenen Kalendercheck benötigen.
Unser genau festgelegtes Modell bildet das Label von Sample t aus abgeschlossenen Kursen t+1 und t+2. Der erste Testzeitraum ist 10; Training erfolgt nach Schluss 9 und vor Beginn 10. Gap eins lässt Sample 8 als letztes Training erhalten. Sein Label benötigt Schluss 9 und 10, also noch Zukunftsinformation. Gap zwei lässt Sample 7 erhalten; sein Label endet bei Schluss 9 und ist unter diesen Annahmen bekannt.
Verfügbarkeit des gesamten Labels prüfen; Gap zwei ist nur hier passend.
- Gap 1
- Letztes Trainingssample 8 – Label benötigt Schluss 10: vor Fit unbekannt
- Gap 2
- Letztes Trainingssample 7 – Label endet mit Schluss 9: im Modell bekannt
- Neue Labeldefinition
- Horizont erneut prüfen – Keine universelle Gapregel
Die richtige Prüfung betrifft den letzten für jedes Label benötigten Zeitpunkt. Ändert sich Horizont oder Konstruktion, wiederholst du sie. Ein Gap von zwei ist nur in dieser regelmäßigen Beispieldefinition passend, keine allgemeine Regel für Handelsdaten.
WFE und seine Grenzen
Unter der TradeStation-Konvention vergleichst du konsistent annualisierten OOS-Ertrag mit annualisiertem IS-Ertrag. Gleiche Kosten-, Expositions- und Renditedefinitionen sind nötig. Zehn Prozent geteilt durch zwanzig Prozent ergeben WFE 0,5 beziehungsweise 50 %. Null im Nenner macht das Verhältnis undefiniert. −5 % geteilt durch −10 % ergeben ebenfalls 0,5, obwohl beide verlieren.
Die dort genannte 50-Prozent-Regel ist eine Faustregel, kein universelles Kapitalfreigabekriterium. Auch ein Quotient über eins beweist nicht allein Zukunftsinformation. Betrachte Nettoresultate, Drawdown, Abdeckung, Konzentration und Sensitivität separat. Ein Parameterwechsel oder niedriger Quotient kann Fragen aufwerfen, ohne die Ursache bereits zu erklären.
Eine vorab definierte Auswahl bewerten
In zwei unabhängigen hypothetischen Renditemodellen ergeben 12 % OOS gegenüber 30 % IS WFE 0,4, und 20 % gegenüber 25 % WFE 0,8. Das entscheidet nicht, welche Methode einen dauerhaften Vorteil besitzt. Auch die Kalenderfrage ist davon getrennt: Der genannte Sechsjahresbestand bietet nur zwei vollständige Vier-plus-eins-Schritte.
Unser Gleichstandsmodell hat Kandidaten A und B, die in jedem von zwei Kalibrierungsschritten gleichauf liegen. Die vorher festgelegte Regel wählt A. Spätere OOS-Nettoergebnisse sind für A +5 und −2, für B −1 und +6 feste Geldeinheiten ohne Verzinsung. Die echte vorab gewählte Regel liefert +3. Nach jedem Resultat den Gewinner herauszupicken liefert +11; B nach Sichtung seiner gesamten Historie auszuwählen liefert +5. Das sind drei verschiedene Experimente.
Vorabregel +3, Einzelgewinner +11 und nachträglich gewähltes B +5 sind verschiedene Experimente.
- A vorab
- +5 −2 = +3 – Tatsächlich festgelegte Aktualisierungsregel
- B gesamte Historie
- −1 +6 = +5 – Nach Ergebnissichtung ausgewählt
- Jeden OOS-Gewinner wählen
- +5 +6 = +11 – Benutzt die zu bewertenden Ergebnisse zur Auswahl
Speichere den gesamten Gleichstand und die gewählte Kennung vor Bewertung. Eine erst danach erfundene Auswahlregel erhält eine neue Version und spätere Prüfung. In einer EUR-Auswertung könnten die genannten Einheiten EUR sein; sie sind hier keine tatsächlichen Kurs- oder Kontodaten.
Grenzübergänge und gemeinsame Equity erhalten
Bestimme, was bei Aktualisierung mit offenen Positionen geschieht: Schließung mit Kosten oder weitergeführte Verwaltung nach klarer Regel. Offene Verluste werden nicht gelöscht und Balance nicht an jeder Grenze frisch begonnen. Verbinde Bewertungsresultate zeitlich, ohne Kalibrierungsgewinne, und löse überlappende Testexposition auf statt sie doppelt zu zählen.
Berechne Gesamt-Drawdown aus der verbundenen Equityreihe; Durchschnitt der Fensterdrawdowns ist etwas anderes. Behalte Nulltradeperioden und Konzentration auf einzelne Blöcke. Vergleiche das Verfahren mit einer vorab gewählten nicht aktualisierten Basis auf denselben Daten, Kosten und Größen.
Historischer Hold-out, spätere Demo-Beobachtung und Monte Carlo stellen unterschiedliche Fragen. Permutation erhält Eingangsresultate und verändert deren Reihenfolge, aber modelliert nicht jede künftige Kosten- oder Marktphase. MT5s Forward-Modus nutzt einen späteren Teil der historischen Teststrecke, nicht automatisch mehrere Walk-Forward-Fenster oder eine zukünftige Demophase. Kein fester Quotient, Zeitraum oder Simulationsquantil garantiert Liveprofitabilität.
Drei nächste Prüfungen für deinen Testplan
- Zeichne den vorhandenen Kalender. Trage Beginn und Ende erlaubter Trainings- und Bewertungsblöcke ein und zähle nur vollständige Paare. Markiere Überschneidungen und fehlende Jahre; halte als Ergebnis fest, wie viele Bewertungen dein Datensatz tatsächlich ermöglicht.
- Prüfe einen Labelhorizont von Hand. Schreibe für die letzten Trainingssamples alle benötigten zukünftigen Schlusspunkte auf und vergleiche sie mit dem Trainingszeitpunkt. Dokumentiere unbekannte Informationen und den dadurch erforderlichen Ausschluss, statt eine universelle Gapzahl zu übernehmen.
- Fixiere Auswahl und Übergabe schriftlich. Benenne Kandidaten, Kriterium, Gleichstandsregel und offene Positionsbehandlung vor der nächsten Bewertung. Speichere die Version und unberührte Blöcke; dein Ergebnis ist ein reproduzierbarer Testplan, keine automatisch abgeleitete Livefreigabe.
Prüfe dein Verständnis
Etwa 2 Minuten Übung.
Antwort und Erklärung anzeigen
Richtig: Der Sampleindex ist früher, der vollständige Labelhorizont reicht aber in den Test.
Weitere Fragen
Was unterscheidet Walk-Forward von einem einzelnen Hold-out?
Ein Hold-out bewertet eine ausgewählte Konfiguration auf einem reservierten Block. Walk-Forward wiederholt eine vorher definierte Aktualisierung und Bewertung. Vier Trainingsjahre mit jährlicher Prüfung ergeben für 2018–2023 zwei vollständige OOS-Jahre. Fünf Prüfjahre benötigen neun Jahre insgesamt. Mehr Fenster beseitigen weder Abhängigkeit noch Auswahlverzerrung automatisch.
Wie lese ich WFE richtig?
Benenne die Konvention und vergleiche konsistent annualisierte IS- und OOS-Erträge. 10/20 und −5/−10 ergeben beide 0,5, obwohl das zweite Paar verliert. Bei Null im Nenner ist das Verhältnis undefiniert. Eine 50-Prozent-Faustregel ist keine universelle Kapitalfreigabe. Prüfe Kosten, Auswahlhistorie, Nettoresultate und den Drawdown der verbundenen Equity.
Ist rolling besser als expanding?
Die passende Kalenderregel hängt von Frage, Daten und Anforderungen ab. Rolling behält feste Trainingslänge, expanding denselben Anfang mit wachsendem Ende. Kürzere Historie entfernt ältere Bedingungen, liefert aber weniger Beobachtungen. Keine Variante garantiert Anpassung oder Stabilität. Wer anhand bereits beobachteter OOS-Ergebnisse auswählt, führt selbst einen weiteren Selektionsschritt durch.
Garantiert eine saubere Walk-Forward-Analyse Livegewinne?
Nein. Die Ergebnisse hängen von Daten, Informationszeit, Kosten, Ausführung und Auswahl ab. Historischer MT5-Forward, zukünftige Demo-Beobachtung und eine definierte Simulation beantworten verschiedene Fragen. Weder WFE über 0,5 noch eine feste Demodauer und ein günstiges Drawdownquantil liefern Sicherheit. Dokumentiere konkrete Grenzen und Kriterien, statt positive Historie als Gewissheit zu behandeln.
Quellen und Nachvollziehbarkeit
- scikit-learn — TimeSeriesSplit
ChronologischeTestaufteilungundAbstand;dasLabelzeitbeispielistunserModell.
- scikit-learn — Common pitfalls
DatenleckageundTrennungvonTrainingundEvaluation.
- TradeStation: Walk-Forward Out-of-Sample Summary
WFE-Konvention mit annualisierten Erträgen und 50-Prozent-Faustregel, kein universeller Zulassungswert.
- MetaQuotes: Strategieoptimierung
Historische Forward-Strecke und gewählte Test-/Optimierungseinstellungen; kein automatischer rollierender Mehrfenstertest.
- Bailey et al. — Pseudo-Mathematics and Financial Charlatanism (2014)
Originalarbeit zu vielen getesteten Varianten und Backtest-Überanpassung.
Rechenfälle sind ausdrücklich angenommene Beispiele. Sie ersetzen weder aktuelle Marktdaten noch die Spezifikation deines Anbieters.
