Бэктест закончился, и в отчёте одно число: коэффициент Шарпа 1,4. Шкала знакомая — до 1 считается терпимо, от 2 принято называть хорошим, — и именно знакомство здесь и мешает. Коэффициент Шарпа — это частное от двух величин, которые вы не выбирали сами: средней доходности сверх безрисковой ставки и волатильности этих доходов, и обе посчитаны на той выборке, которая досталась тесту.
Ниже — что показатель на самом деле измеряет, что разные платформы кладут под одним и тем же названием и почему высокое значение в бэктесте бывает результатом короткой выборки, забытых издержек или поиска, который выглядел иначе, чем помнится. Дело не в том, чтобы отказаться от метрики. Дело в том, чтобы читать её рядом с порогом, а не отдельно.
Что на самом деле измеряет коэффициент Шарпа
Это доходность на единицу общего риска. В дневном виде — средняя дневная доходность за вычетом безрисковой ставки, делённая на стандартное отклонение этих доходов, затем умноженная на корень из числа торговых дней года: √252 для большинства фондовых и криптовалютных рынков.
SR_год = mean(R - Rf) / stdev(R) * sqrt(252)
Это не процент побед. Система, которая закрывает большинство сделок с небольшой прибылью и раз в несколько недель получает один крупный убыток, может показать скромный Шарп; система, которая чаще закрывается в минус на несколько пунктов, но редко ловит длинный тренд, — высокий. Показателю важна только форма распределения доходностей по периодам. Число сделок, время удержания и доля прибыльных позиций он не видит вообще.
Разбор на числах
Возьмём дневную стратегию со средней доходностью 0,06% в день и дневным отклонением 1,5%. Дневной коэффициент: 0,06 / 1,5 = 0,04; в годовом выражении 0,04 × 15,87 ≈ 0,63. Теперь вычтем скромный издержечный дрейф — 0,03% в день на комиссию и проскальзывание, примерно один круговой перенос каждые три торговых дня по обычным розничным ставкам. Числитель уменьшается вдвое до 0,03, и годовой коэффициент падает до 0,02 × 15,87 ≈ 0,32. Логика правил не изменилась — изменилась только бухгалтерия, а метрика стала вдвое хуже.
| Составляющая | Значение в примере | Что на неё влияет |
|---|---|---|
| Средняя доходность сверх ставки | 0,06% в день | Режим рынка, качество сигнала, вычли ли издержки |
| Стандартное отклонение | 1,5% в день | Размер позиции, плечо, волатильность инструмента |
| Коэффициент годового пересчёта | √252 ≈ 15,87 | Принятое число торговых дней в году |
| Итоговый коэффициент Шарпа | 0,63 «грязный», 0,32 чистый | Всё перечисленное одновременно |
Одно название — разные вычисления
Две платформы показывают разные значения Шарпа на одной и той же кривой капитала, потому что за названием скрываются минимум три решения: безрисковая ставка, работа с издержками и момент исполнения ордера.
Функция strategy() в TradingView по умолчанию закладывает безрисковую ставку 2%; Composer считает Шарп при Rf = 0. В сильный год разница молча вычитает 2 процентных пункта из числителя, в слабый — превращает слегка отрицательный результат в явно отрицательный. Ни одна из настроек не ошибочна. Просто это две разные метрики под одним именем, и сравнение платформ без заявленного допущения ничего не сравнивает.
Вторая развилка — издержки. Одни движки вычитают комиссию и проскальзывание только когда вы заполнили поля, другие игнорируют их полностью. Третья и самая опасная — цена исполнения: если бэктест покупает по закрытию той же свечи, чьё закрытие и дало сигнал, он использовал информацию, которой живой ордер располагать не мог. Такой Шарп относится к рынку, которого не существует, и при этом проходит все остальные ваши проверки.
| Скрытое допущение | Консервативная настройка | Эффект для отчётного Шарпа |
|---|---|---|
| Безрисковая ставка | Заявлена явно, а не по умолчанию | Сдвигает числитель на всю разницу до нуля |
| Комиссия и проскальзывание | Внесены на каждую сторону | Чаще всего самое крупное удержание |
| Цена исполнения | Открытие следующей свечи после сигнала | Убирает прибыль от исполнения по той же свече |
| Выборка | Годы, а не недели | Сужает ошибку вокруг оценки |
Откуда взялись нормы «1 — нормально, 2 — хорошо»
Привычные полосы — до 1 слабо, от 1 до 2 нормально, выше 2 отлично — выросли из фондовых правил, принятых в индустрии, и построены на помесячной чистой доходности управляющих с десятилетними трек-рекордами, реальными ограничениями по объёму и проверенными издержками. Даже там они были грубыми. Применённые к двухгодовому розничному бэктесту, они теряют то, что делало их осмысленными: выборка короткая, доходности почасовые или дневные, издержки — необязательный ввод, а стратегию выбирал не комитет, а вы, из набора вариантов, которые перебрали.
Бэктест, который «выглядит как 2», поэтому не тот же объект, что управляющий с показателем 2. Цифры совпадают, а ошибка выборки, способ отбора и модель издержек — нет. Отсюда полезный вопрос: не «хороший ли у меня коэффициент Шарпа», а хорош относительно какого порога, получен за сколько испытаний и на какой длине выборки. Одно число ответить на все три вопроса не может.
Почему высокий Шарп бывает шумом
Четыре механизма раздувают коэффициент Шарпа в бэктесте без улучшения самих правил. Они не исключают друг друга — как правило, они накладываются.
1. Выборка короткая
У самой оценки есть собственное стандартное отклонение, приблизительно sigma_SR = sqrt((1 + SR^2 / 2) / T) для T периодов. На году дневных данных при заявленном Шарпе около 1 ошибка порядка 0,08, то есть число 1,15 несёт вокруг ±0,15 чистого выборочного шума до каких-либо других возражений. Два года сужают полосу. Два месяца делают число декоративным.
2. Издержки не посчитаны
Пример выше превратил 0,63 в 0,32 на скромном дрейфе. Для частых входов комиссия, спред и проскальзывание — не округление, а нередко вся разница между найденным краем и его отсутствием. Полный список того, что бэктест молча пропускает, — в статье про издержки бэктеста.
3. Исполнение идёт по той же свече
Исполнение на свече сигнала позволяет торговать по цене, информация которой совпала с моментом сделки. Это раздувает и долю прибыльных входов, и сам Шарп, и исчезает на первом же реальном ордере. Разрыв между двумя мирами измеряется, а не обсуждается: бэктест и живая торговля.
4. Число было выбрано
Это самый сильный из четырёх. Bailey и Lopez de Prado показали: на пяти годах дневных данных более примерно 45 независимых вариантов правил уже делают появление Шарпа 1 и выше вероятным уже только за счёт случайности. Обычный трейдер не проводит 45 экспериментов — он меняет несколько параметров, замечает, какая комбинация смотрится лучше, и оставляет её. Это тот же акт более скромным словарём. Как ведётся счёт, почему сырые запуски схлопываются в меньшее эффективное число испытаний и как от этого двигается порог — тема статьи сколько бэктестов уже слишком.
Все четыре механизма ведут к одному результату — к ложноположительному выводу: отчёт демонстрирует правило, которое прошло проверку на данных, но не гарантирует ничего на рынке. Короткая выборка и забытые издержки смещают число вверх; перебор параметров портит не столько само число, сколько факт отбора — поэтому против него не спасают ни удлинение выборки, ни аккуратно внесённые комиссии. Перебранное семейство правил всегда выглядит лучше, чем оно есть.
Порог вместо красивого числа
Поправка не требует полной формулы обесцененного Шарпа, чтобы стать рабочей. Достаточно грубого порога: стандартной ошибки Шарпа, умноженной на √(2 · ln N_eff), где N_eff — число эффективно независимых вариантов, которые вы перебрали. Выражение оценивает, какая часть наблюдаемого Шарпа могла быть изготовлена отбором лучшего из N выборок из шума.
Как пример интерфейса — числа, которые интерфейс и предназначен показывать, а не результаты живого счёта, — запуск со значением Шарп 0,94 при требуемых 1,47 на 11 эффективных испытаниях читается зелёным рядом с нулём и красным рядом с порогом. Метрика между этими двумя чтениями не менялась. Менялась точка отсчёта, и информативна только вторая: она одна говорит, переживёт ли результат проверку.
Длина выборки делает то же самое с другой стороны: тот же перебор на более короткой выборке даёт более широкую полосу шума, поэтому требуемый порог растёт даже при фиксированном числе испытаний. Проверка, которая режет обе проблемы, — не судить по тем данным, по которым правила и отбирались: вневыборочный тест.
Коэффициент Шарпа и Сортино, коротко
Сортино заменяет знаменатель на отклонение вниз, считая только доходности ниже цели. У стратегии со скошенными распределениями — много мелких прибылей и редкие крупные убытки — два показателя расходятся заметно, потому что Сортино перестаёт наказывать за вертикальные рывки вверх, которые Шарп записывает в риск. Ни один из двух не знает, сколько вариантов вы перебрали. Сортино отвечает на вопрос, насколько ровной была траектория, а не на то, насколько результат похож на удачу; подмена одного другим ничего не делает с числом испытаний.
| Коэффициент Шарпа | Коэффициент Сортино | |
|---|---|---|
| Знаменатель | Вся волатильность | Только отклонение вниз |
| Штрафует всплески вверх | Да | Нет |
| Учитывает число испытаний | Нет | Нет |
| Когда уместен | Сравнение запусков при одинаковых допущениях | Асимметричные профили доходности |
Как проверить это в Normal Trading
Шесть шагов до того, как значение коэффициента Шарпа заслужит доверие:
- Читайте его рядом с порогом, а не отдельно. Значение выше нуля почти ничего не говорит, когда испытания посчитаны.
- Убедитесь, что комиссия и проскальзывание внутри запуска, а не отложены «потом».
- Убедитесь, что исполнение идёт после свечи с сигналом, а не на ней.
- Посмотрите, сколько запусков дало это число и не схлопнуты ли почти одинаковые варианты в эффективное число испытаний.
- Проверьте, что реально лежит в выборке. Окно только роста мало что говорит о поведении стратегии в том режиме, в котором вы торгуете по-настоящему.
- Сравните максимальную просадку того же запуска с лимитом вашего капитала до всяких разговоров о доходности на единицу риска.
Затем сделайте один сравнительный прогон: откройте симулятор Replay, выполните сохранённый граф один раз как сохранённый и второй раз с включёнными комиссией и проскальзыванием, и прочитайте, сколько Шарпа пережило второй проход. Всё, что исчезло там, никогда не принадлежало стратегии — это принадлежало отчёту.