Бэктестинг на коротком периоде: мираж быстрой прибыли

Бэктестирование торговой стратегии на коротком историческом периоде — одна из самых распространённых и одновременно самых опасных ошибок начинающих трейдеров. Стратегия демонстрирует блестящие результаты на данных за последние два-три месяца, трейдер воодушевлённо запускает её в реальную торговлю — и через несколько недель сталкивается с серией убытков, которые полностью уничтожают иллюзорную прибыль. Причина этой проблемы фундаментальна: короткий период тестирования просто не способен отразить всего разнообразия рыночных условий, которые неизбежно встретятся в будущем.

Почему короткий период тестирования создаёт ложную уверенность

Финансовые рынки по своей природе цикличны и изменчивы. За длительным трендовым периодом неизбежно следует боковое движение, за низкой волатильностью — высокая, за периодом оптимизма — коррекция. Если вы тестируете стратегию исключительно на трендовом участке, вы не имеете ни малейшего представления о том, как она поведёт себя во время длительного флэта. И наоборот — стратегия, спроектированная для бокового рынка, может показать прекрасные результаты на спокойном участке, но полностью уничтожить депозит при первом сильном направленном движении.

Рыночные фазы, которые обязательно должны быть включены в период тестирования для получения достоверных результатов:

• Устойчивый бычий тренд — продолжительный рост с периодическими откатами и коррекциями. Стратегия должна уметь извлекать прибыль из направленного движения или, как минимум, не терять деньги.
• Затяжной медвежий тренд — длительное снижение рынка, часто сопровождающееся паническими продажами и резкими отскоками. Критически важная фаза для проверки устойчивости любой стратегии.
• Боковое движение (флэт) — отсутствие выраженного направления, когда цена колеблется в определённом диапазоне. Многие трендовые стратегии генерируют серии убыточных сделок именно в такие периоды.
• Высокая волатильность — резкие и значительные движения в обе стороны, характерные для кризисов, геополитических событий и «чёрных лебедей». Стоп-лоссы могут проскальзывать, ликвидность падает.
• Низкая волатильность — периоды «мёртвого» рынка с минимальными ценовыми движениями, когда спреды расширяются, а торговые издержки съедают потенциальную прибыль.

Минимальные требования к периоду тестирования для различных стратегий

Универсального правила не существует, однако профессиональные количественные аналитики и системные трейдеры обычно придерживаются следующих ориентиров:

Количество сделок — критически важный параметр, на который многие не обращают внимания. Стратегия с пятнадцатью сделками за тестовый период не обладает статистической значимостью. Даже абсолютно случайный вход в рынок может показать впечатляющую прибыль на таком малом количестве наблюдений — это не свидетельство наличия торгового преимущества, а обычная случайность.

Статистическая значимость результатов и иллюзия прибыльности

Представьте простой эксперимент: вы подбросили монету десять раз и получили восемь «орлов». Означает ли это, что монета нечестная или обладает какими-то особыми свойствами? Разумеется, нет — это вполне вероятный результат при малой выборке, и повторный эксперимент с высокой вероятностью даст другое соотношение. Точно так же и в трейдинге: двадцать прибыльных сделок из двадцати пяти на коротком историческом периоде могут оказаться простым статистическим совпадением, не имеющим отношения к реальному преимуществу стратегии.

Для корректной оценки статистической значимости результатов бэктеста необходимо обращать пристальное внимание на следующие параметры:

1. Общее количество сделок — чем больше наблюдений, тем надёжнее статистика. Минимальный порог для начального доверия — 100 сделок, для серьёзных выводов — 300 и более.
2. Коэффициент Шарпа — отношение избыточной доходности к волатильности результатов. На коротком периоде этот показатель легко завышается за счёт нескольких удачных крупных сделок.
3. Максимальная просадка — на коротком периоде вы можете просто не увидеть реальную максимальную просадку стратегии, которая проявится позже при смене рыночных условий.
4. Стабильность результатов по подпериодам — разбейте тестовый период на кварталы или полугодия. Результаты должны быть положительными в большинстве отдельных подпериодов, а не только в среднем за весь срок.
5. Profit factor — отношение общей прибыли к общему убытку. Значение выше 1,5 на длинном периоде внушает больше доверия, чем даже 3,0 на коротком.

Ошибка выживания при выборе тестового периода

Особенно опасна и коварна ситуация, когда трейдер сознательно или бессознательно выбирает «удобный» период для тестирования своей стратегии. Например, разрабатывает стратегию покупок, тестирует её на восходящем участке рынка и с уверенностью заключает, что стратегия работает великолепно. Это классический случай data snooping — подгонки под заранее известный результат, которая полностью обесценивает выводы тестирования.

Другой распространённый вариант — трейдер начинает тестирование с «сегодня» и берёт данные на три месяца назад. Если текущий рынок находится в определённой фазе (например, в тренде), весь тестовый период будет представлять только эту фазу, и результаты будут катастрофически нерепрезентативны.

Если вы выбираете период тестирования после того, как уже посмотрели на график и знаете, что произошло с ценой, вы уже совершаете серьёзную методологическую ошибку. Период тестирования должен быть определён заранее, и он должен быть максимально длинным.

Как StratBase.ai помогает избежать этой распространённой ошибки

На платформе StratBase.ai вы можете протестировать свою торговую стратегию на различных исторических периодах и немедленно сравнить полученные результаты. Система автоматически рассчитывает и отображает количество совершённых сделок, все ключевые метрики эффективности и распределение результатов по временным периодам. Если количество данных недостаточно для статистически значимых и надёжных выводов — вы увидите это сразу, задолго до того, как рискнёте реальными деньгами на основании ненадёжной статистики.

Не экономьте на длине исторического периода тестирования. Торговая стратегия, протестированная на коротком отрезке времени, — это не полноценная стратегия, а лишь непроверенная гипотеза. И отправлять непроверенную гипотезу в реальную торговлю с настоящими деньгами — всё равно что отправлять инженерный прототип в космос без проведения полного цикла испытаний. Результат предсказуем и, к сожалению, почти всегда печален.

Дополнительные ресурсы

• Коэффициент Шарпа — Investopedia
• Просадка — Investopedia
• Риск-менеджмент — Investopedia