Walk-forward: хронология, доступность меток и оценка правил

Walk-forward последовательно выбирает параметры на более ранних данных и оценивает их на следующем участке. Проверяется процедура обновления, а не только последний набор параметров. До просмотра оценочных результатов определите календарь и правила выбора. Общие обучающие данные и временная зависимость означают, что окна не становятся автоматически независимыми; выбор удобного разбиения после просмотра результатов тоже может подгонять процедуру.

Опишите обновление до проверки

Задайте длину обучения и оценки, частоту обновления, набор кандидатов, критерий, разрешение ничьей и действие, если никто не подходит. Максимизация прибыли — выбранный критерий, а не нейтральное правило по умолчанию. Учитывайте расходы, экспозицию и объем наблюдений одинаково для всех вариантов.

Перебор альтернатив может выбрать случайный исторический шум. Однако доля выигрышей выше 75% на 200 сделках или profit factor выше 3.5 сами по себе не диагностируют переобучение. Проверяйте данные, расходы и историю выбора: практические вопросы разобраны в материале о корректном бэктесте.

В исходной условной схеме метка примера t использует закрытия следующих двух периодов: t + 1 и t + 2. Тест начинается с периода 10. Обучение модели выполняется после закрытия 9 и до начала 10. Проверяйте не только индекс обучающего примера, но и последнее требуемое для его метки наблюдение.

Прокрутите таблицу вправо, чтобы увидеть все столбцы →

Здесь равномерные периоды, одинаковое индексирование и метки ровно из двух будущих закрытий. Gap исключает последние обучающие примеры до теста. Смена горизонта или построения метки требует новой проверки; число 2 не является универсальным рецептом. TimeSeriesSplit в документации scikit-learn (на английском) определяет исключение примеров, но сам не исследует все данные, из которых вы построили метку.

Сдвиг окна по шагам

Выберите окна до настройки. В учебном календаре можно обучиться на 2018–2021 годах, заморозить параметры и оценить 2022; затем обучиться на 2019–2022 и оценить 2023. Это иллюстрация разбиения, не отчет о реальной доходности этих лет.

Обучающие окна пересекаются, а оценочные участки соседствуют во времени. Соберите OOS-сделки хронологически и рассмотрите неопределенность. Если календарь и критерии менялись по результатам ранних проверок, оставьте для окончательной оценки новый неиспользованный участок. Ранее оцененный 2022 год может стать частью обучения следующего шага, когда данные исторически доступны; это не разрешает пересчитать прежний выбор с будущим знанием.

Скользящее и расширяющееся обучение

Скользящее окно сохраняет длину и отбрасывает старые наблюдения. Расширяющееся, или anchored, сохраняет начало и добавляет новые. Для иллюстрации скользящие обучающие блоки: 2018–2021, 2019–2022, далее 2020–2023; расширяющиеся: 2018–2021, 2018–2022, далее 2018–2023. Для оценки после третьего указанного обучения потребовался бы 2024 год: в наборе, заканчивающемся 2023-м, такого полного OOS нет.

Короткая память исключает старые условия, но уменьшает выборку. Длинная сохраняет больше наблюдений, возможно из других условий. Ни один вариант не гарантирует быструю адаптацию или устойчивые параметры. Нет универсального назначения скользящего окна трендовой стратегии, расширяющегося — возврату к среднему; длина истории пять или десять лет сама не выбирает лучший вариант.

Нормирование, отбор признаков и заполнение пропусков также обучаются только на разрешенных обучающих данных. Метка может использовать будущие закрытия при старом индексе примера. Равномерность наблюдений позволяет сопоставлять длительности окон; для нерегулярных событий нужна отдельная проверка календаря. Одна настройка gap не устраняет все механизмы утечки информации.

Новый условный пример: старый индекс, но еще недоступная метка

Снова обучаемся после закрытия 9 и до периода 10. Gap 2 оставляет индексы не позднее 7, но теперь горизонты меток и задержки выдачи различаются. Все периоды и задержки ниже вымышлены. «Доступно после закрытия j» означает, что значение можно использовать начиная с этого указанного момента; это не календарь реальных публикаций.

Прокрутите таблицу вправо, чтобы увидеть все столбцы →

Все четыре индекса проходят условие t ≤ 7, однако две метки еще недоступны. В строке 5 даже нужные цены уже исторические, но назначенная задержка выдачи не завершилась. В строке 6 длинный горизонт требует будущего закрытия. Нельзя исправить это утверждением «все строки раньше теста». Для каждого примера проверяйте момент доступности метки и признаков. Неизвестное время не считайте автоматически разрешенным; правила исключения и исходные отметки времени сохраняйте.

WFE: соглашение о расчете и ограничения

В описании TradeStation Walk-Forward Efficiency сравниваются приведенные к годовому масштабу доходности OOS и IS при согласованных определениях. В своей иллюстрации 10% / 20% = 0.5, то есть 50%. Нулевой IS в знаменателе делает отношение неопределенным. При −5% / −10% тоже получится 0.5, хотя оба результата отрицательны.

Показатель выше единицы не доказывает использование будущей информации. TradeStation описывает 50% как практический ориентир, а не всеобщее разрешение запускать реальный капитал. Отдельно проверяйте чистые результаты, просадки, концентрацию, покрытие и чувствительность. Низкое WFE или изменение параметра более чем на 50% сами не устанавливают подгонку.

Условное сравнение и выбор при ничьей

Для назначенных годовых доходностей 12% OOS и 30% IS отношение равно 0.4; для 20% и 25% — 0.8. Эти частные вычисления не устанавливают устойчивое преимущество. При данных за 2018–2023, четырех годах обучения, одном оценки и ежегодном сдвиге доступны два полных OOS-блока: 2022 и 2023.

Рассмотрим отдельную вымышленную ничью. На обоих шагах A и B имеют одинаковый калибровочный результат; записанное до теста правило выбирает A. Поздние чистые денежные итоги без реинвестирования: A дает +5 и −2, B — −1 и +6. Замороженное правило получает +3. Выбор победителя после каждого результата дал бы +5 + 6 = +11; выбор B после просмотра всей истории дал бы +5. Это три разные процедуры, а не три способа честно пересчитать один замороженный результат.

До каждого оценочного участка сохраняйте весь набор равных кандидатов и выбранный ID. Новое правило, придуманное по OOS, получает новую версию и последующую отдельную оценку. Даже корректная хронология не гарантирует будущую прибыль: остаются предпосылки данных, расходов и исполнения.

Чего walk-forward не делает автоматически

Определите судьбу открытых позиций на границе обновления: закрытие с расходами либо дальнейшее сопровождение по явному правилу. Нельзя стирать открытые потери и начинать новый баланс в каждом окне. Объединяйте только оценочные результаты, не добавляя к ним прибыль калибровки, и разрешайте пересекающуюся экспозицию без двойного счета.

Просадку полного периода считают по объединенной кривой. Отдельная арифметическая проверка: путь 100 → 90 | 95 → 85 имеет общую максимальную просадку 15% от начального максимума 100. Первое окно дает 10%, второе со стартом 90 и максимумом 95 — около 10.5263%. Среднее этих двух просадок около 10.2632% не равно общей просадке. Числа полностью условные; черта обозначает границу отчета, а не пополнение счета.

Сохраняйте периоды без сделок и концентрацию результата в отдельных окнах. Сравнивайте процедуру обновления с заранее выбранным неизменяемым вариантом на тех же данных, с теми же расходами и объемом.

Нетронутый исторический участок, последующее наблюдение на демо и Монте-Карло (на английском) отвечают на разные вопросы. Перестановка меняет порядок заданных исходов, но не моделирует автоматически новые режимы и расходы. Режим Forward тестера MT5 проверяет выбранные настройки на более поздней части исторического интервала; сам по себе он не является многократным walk-forward или наблюдением будущей демо-торговли.

Ни WFE выше 0.5, ни три–шесть месяцев демо, ни 95-й процентиль просадки ниже 25% не образуют универсального «допуска» к реальным деньгам. Запишите все испытанные календари и критерии. Дополнительный контекст: проверка торгового преимущества (на английском) и практикум трейдера (на английском).

Следующая проверка по шагам

1. Выберите длины окон по задаче и доступной истории до просмотра оценки. Пять лет дают одну полную пару «четыре обучения плюс один оценки»; пять ежегодных OOS требуют девяти лет. Независимость наблюдений от этого не возникает.
2. Для исходных 2018–2023 сохраните первый выбор по 2018–2021 и результаты 2022, затем выбор по 2019–2022 и результаты 2023. Если нужно больше окон, явно расширьте данные.
3. Запишите кандидатов, критерий, правило ничьей, доступность каждой метки, выбранную версию и последующие чистые результаты без настройки по их исходу.
4. Считайте WFE только при осмысленном знаменателе и согласованной годовой доходности; дополнительно изучайте исходные результаты и общую кривую капитала.
5. Изменение дизайна отделяйте от окончательной нетронутой оценки. Участок остается неиспользованным лишь пока его результат не направляет дальнейший выбор.