Статистика

Что такое максимальная просадка — и почему бэктест её занижает

Просадка стратегии — что это и почему по ней чаще всего и судят: максимальная просадка показывает самое большое падение от пика до дна в процентах от пика. Для её расчёта не нужна безрисковая ставка, не нужен пересчёт на год и не нужно предположение о форме распределения — достаточно той кривой капитала, которая уже есть в отчёте.

Именно поэтому по просадке ставят порог, а не по доходности. Ниже — формула, чем marking-to-market отличается от учёта закрытых сделок, почему число зависит от одного сценария, а не от распределения, почему цифра из бэктеста систематически заниживает живую просадку и каким должен быть порог, который действительно что-то удерживает.

Что считается просадкой: формула

В каждый момент капитал сравнивается с его историческим максимумом. Просадка на момент t — падение от этого бегущего пика; максимальная просадка — наибольшее такое падение за весь тест.

DD_t = (Пик_t - Капитал_t) / Пик_t
MaxDD = максимум DD_t по всем t

Обе величины считаются от пика, и это первое место, где ошибаются: падение со 145 до 92 — это не 53% и не 36,6%, а 63 / 145 = 43,4% от денег, которые были на вершине.

Как считать просадку: разбор на числах

Возьмём простую кривую: старт 100, рост до 145, падение до 92, отскок до 130.

ТочкаКапиталБегущий пикПросадка от пика
Старт1001000%
Максимум1451450%
Дно9214543,4%
Частичный отскок13014510,3%

Максимальная просадка — 43,4%. Второе число прячется в той же таблице: чтобы подняться с 92 обратно на 145, нужно заработать +57,6%, а не 43,4%. Это несоответствие между падением и подъёмом и есть причина, по которой у просадки отдельный порог.

Просадка по открытым позициям и по закрытым сделкам

Две схемы учёта дают разные цифры на одном и том же торговом поведении, и расхождение обычно в пользу трейдера, когда берут неверную.

Учёт закрытых сделок принимает во внимание только реализованное: после выхода из позиции счёт считается непросаженным, поэтому сделка, которая была на 40% в минусе и выровнялась, в итоговое число не попадает. Учёт по текущей стоимости (mark-to-market) переоценивает счёт в каждый момент, включая время, когда позиция открыта, и содержит плавающий убыток.

Честная вторая схема, потому что счёт никогда не находился на том уровне, который показывает первая. Брокер не приостанавливает убыток, пока вы думаете. Система с просадкой 12% по закрытым сделкам и 35% по текущей стоимости имеет проблему на 35%, и маржин-колл приходит именно по второму числу. Учёт закрытых сделок уместен только для отчётности по рискам отдельной сделки, например MAE при плоском счёте, но никогда как порог по счёту.

Один сценарий, а не распределение

Коэффициент Шарпа, Сортино и процент побед — свойства распределения доходностей: они переживают перестановку одних и тех же сделок. Максимальная просадка — нет. Она зависит от порядка: переставьте те же три сделки и число меняется на десятки процентных пунктов.

Порядок сделокТраектория капиталаИтогМаксимальная просадка
+100%, затем −30%, затем −30%100 → 200 → 140 → 989851%
−30%, затем +100%, затем −30%100 → 70 → 140 → 989830%

Те же сделки, тот же итог, разница в отчётном риске — 21 процентный пункт. Отсюда три следствия.

  • Число — это одна реализация. Бэктест показывает просадку одной последовательности сделок на одном куске истории. Это наблюдаемое значение, а не ожидаемое и не худший случай.
  • Длина выборки сильнее влияет на число, чем стратегия. Два года данных физически не содержат пятилетней просадки; тест, растянутый на дольше, почти механически находит большую.
  • Слабое преимущество не ужимает хвост пропорционально. Сценарий, породивший исторический максимум, — не тот, по котору вы будете торговать завтра, но и не посторонний: это выборка из того же процесса.

Почему выживание зависит именно от просадки

Метрики доходности описывают, как быстро растёт счёт; просадка описывает, доживёт ли он до роста. Арифметика несимметрична, и средняя доходность её не компенсирует:

УбытокНужно для возврата
10%+11,1%
20%+25%
33%+49,3%
50%+100%
75%+300%

Просадка 50% — не пауза, а удвоение требуемого края. Примерно за 60–70% счёт попадает в зону, где для возврата нужен забег, который большинство систем изначально не показывало, поэтому разорение — это понятие о просадке раньше, чем о доходности. Плечо делает то же самое механически: при удвоенном размере позиции собственные 20% от пика до дна превращаются в 40% по счёту, а требование возврата скакивает с +25% до +67%.

Здесь же проходит граница с волатильностью. Волатильность измеряет, насколько сильно качается капитал, симметрично, и стратегия с бурными месяцами роста выглядит для неё рискованной. Просадка видит только ту последовательность, которая больно бьёт: коэффициент Шарпа бывает приличным на кривой, которая находится в одной смене режима от ямы, потому что слагаемое волатильности знает только те данные, которые ему дали.

Шарп, просадка и Калмар

Метрики отвечают на разные вопросы, и ни одна не заменяет остальные.

МетрикаВопросСлепое пятно
Коэффициент ШарпаСколько дохода на единицу волатильности?Ничего не говорит о худшем периоде и о числе испытаний
СортиноТо же, но только падения внизПо-прежнему распределение, по-прежнему границы выборки
Максимальная просадкаКакова была худшая яма и сколько взбираться?Один сценарий, без информации о частоте
Калмар (CAGR / MaxDD)Сколько роста на единицу худшего убытка?Наследует свойства обоих входов

Сравнение при одинаковом Шарпе — самое показательное. Две стратегии на одних и тех же годах дают Шарп около 1,1: одна ползёт при просадке 8–12%, вторая большую часть времени стоит вflat и потом теряет 45% в период, которого выборка не содержала. Шарп второй ямы не видит, потому что событие, которое её вырывает, отсутствует в доходностях, по которым он посчитан. Так и читается «один Шарп — разный хвост»: отношение ограничено своей выборкой, а хвост — свойство процесса. Калмар сводит разницу к одному числу: рост 12% при просадке 18% даёт 0,67, те же 12% при просадке 45% — 0,27.

Почему цифра из бэктеста — это пол

Максимальная просадка в бэктесте — наибольшее значение, встреченное в выборке. Как утверждение о будущем она смещена вниз, и причина тут не в качестве работы:

  • Порядковая статистика растёт с выборкой. Ожидаемый максимум из большего числа наблюдений больше. Гонять те же правила десять лет вместо двух — почти наверняка найдётся худший период, даже если стратегия не изменилась.
  • Режимов не хватает. Тест на спокойном росте не имеет механизма для просадки, которую создали бы шок по ставкам, ликвидный разрыв или общий сброс риска. Отсутствие события внутри выборки ничего не доказывает о самом процессе.
  • Живой счёт торгует вперёд, в неизвестные данные. Разрыв между числом из бэктеста и первой серьёзной живой просадкой измеряем, а не гипотетичен — это тот же разговор, что в статьях бэктест и живая торговля и вневыборочный тест.

Практический перевод: максимальная просадка бэктеста — это нижняя граница правдоподобного диапазона, а не его середина. Число, которое растёт при каждом удлинении теста, говорит, что оно ещё не сошлось, — а поиск, оставивший лучшую кривую среди многих, усиливает эффект: сохранённый вариант именно тот, у кого самый удачливый сценарий. Про это — сколько бэктестов уже слишком.

Каким должен быть разумный порог

Порог — это утверждение из двух половин: уровня и данных, которые за ним стоят. На практике он звучит так: «максимальная просадка не выше 25% капитала, на выборке минимум в пять лет с медвежьим режимом, с комиссией и проскальзыванием внутри запуска». Каждый член работает отдельно:

  • Уровень задаёт капитал, а не стратегия: это максимум, после которого ломаются размер позиции, план пополнений и ваше собственное поведение.
  • Требование к данным не даёт двухгодовому росту сертифицировать уровень, который он физически не мог измерить.
  • Клауза про издержки убирает самое частое раздувание: при частых входах мелкая просадка в бэктесте возможна только без трения — перечень есть в статье про издержки бэктеста.
  • Клауза про счёт требует применять порог к капиталу вместе с открытыми позициями, при том размере, который реально будет торговаться.

Частые ошибки

  • Просадка стратегии вместо просадки счёта. В отчёте показаны сделки системы, а пополнения, выводы или простой денег выравнивают кривую. Считайте либо весь счёт, либо ничего.
  • Проигнорировано плечо и размер позиции. Процент стратегии и процент счёта — разные числа, как только позиция не равна 100% одного инструмента.
  • Один удачный год. Короткая выборка даёт образцовую просадку 6%, которая ничего не говорит о поведении стратегии за пределами окна.
  • Учтены только закрытые сделки. Плавающий убыток остаётся убытком — см. раздел о текущей стоимости выше.
  • Судят число в одиночку. Крошечная просадка у стратегии, которая ничего не зарабатывает, — не управление риском. Порог имеет смысл только рядом с метрикой доходности и с числом испытаний.

Как порог применяется в отчёте

В отчёте просадку читают относительно порога, а не интуиции, и никогда — в отрыве от остального. Как пример интерфейса — числа, которые экран и предназначен показывать, а не результаты живого счёта: запуск с максимальной просадкой 18% при пороге 25% и коэффициентом Шарпа 0,94 против требуемых 1,47 на 11 эффективных испытаниях даёт раздельный вердикт: по риску порог пройден, по доходности барьер не взят. Числа не перекрывают друг друга — каждое ограничивает, на что вправе претендовать второе. В этом и состоит вся схема: просадка отвечает «доживёт ли счёт», порог отвечает «насколько край похож на реальный», и только вместе они дают основание торговать эти правила дальше.

Как проверить это самостоятельно

  1. Считайте просадку по капиталу с открытыми позициями, при том размере позиции, который собираетесь торговать.
  2. Убедитесь, что в число заложены комиссия и проскальзывание и что исполнение не идёт по свече сигнала.
  3. Посмотрите, что реально лежит в выборке. Если в ней нет проигрышного режима, число меряет окно, а не стратегию.
  4. Удлините тест и проследите, растёт ли максимальная просадка. Рост означает, что значение ещё не сошлось.
  5. Сравните число с лимитом капитала первым делом, и только потом — с Шарпом и его порогом.
  6. Требуйте, чтобы вариант проходил вневыборочные данные, прежде чем считать просадку свойством правил.

Чтобы увидеть метрику в движении, откройте симулятор Replay, прогните сохранённый график по отрезку истории с глубоким падением и прочитайте просадку рядом с порогом, а не рядом с доходностью.