Market Vectors / Financial One

Исследователи опровергли значимость проверки алгостратегий на исторических данных

Исследователи опровергли значимость проверки алгостратегий на исторических данных Фото: lynnesnissanwest.com
3541

Специалисты Quantopian доказали опытным путем низкую эффективность бэктестинга алгоритмических стратегий.

Согласно выводу экспертов, стратегии, которые разрабатываются и тестируются на истории, чаще всего подвержены высокой вероятности подгонки параметров под исторические данные (на сленге алгоритмических трейдеров это называется «оверфитом», от английского overfit). То есть стратегия, демонстрирующая в теории хорошие результаты, в реальной торговле начинает генерировать убытки.

Томас Вики, Эндрю Кэмпбелл, Джастин Лент и Джессика Стафф изучили 888 алгоритмических стратегий, разработанных и протестированных на веб-платформе Quantopian внешними пользователями, преимущественно частными трейдерами. Период тестирования составлял 6 месяцев. Было обнаружено, что коэффициент Шарпа, часто используемый в момент тестирования и отбора стратегии, дает худшие результаты в будущем. Наиболее интересными показателями стали волатильность и максимальная просадка (дродаун) портфеля.

В ходе исследования специалисты Quantopian строили параметрическую линейную регрессию и считали коэффициент корреляции между выборкой (in sample - IS), на которой тестировалась стратегия, и вне нее (out of sample - OOS). В результате, полученный коэффициент Шарпа на выборке IS находился в отрицательной корреляции с выборкой OOS. То есть разработчик стратегии получал прямо противоположные результаты — вместо растущего коэффициента Шарпа по итогам бэктеста происходил обратный процесс, его снижение на реальных данных.

Также были изучены регрессоры, которые все же могут позволить предсказывать будущий коэффициент Шарпа, исходя из данных, полученных на тестовой выборке. Наилучшим признано соотношение доходностей между 95-м процентилем и 5-м процентилем.

Авторы резюмируют, что судить о прибыльности стратегии только по результатам бэктеста неправильно, поскольку есть высокая вероятность ввести себя в заблуждение. Эксперты говорят, что альтернативой традиционному бэктесту может стать применение процедур машинного обучения, в ходе которых используется так называемая перекрестная проверка (кросс-валидация). Именно она позволяет понять эффективность торговой стратегии с большей достоверностью.




Теги: Quantopian

Вернуться в список новостей

Комментарии (0)
Оставить комментарий
Отправить
Новые статьи
  • Что важного сказал Путин на ПМЭФ – ключевые тезисы
    Автор: Яна Кудрявцева 20.06.2025 18:08
    1254

    Президент Владимир Путин заявил, что российская экономика демонстрирует устойчивый и качественный рост. Он сообщил об этом в ходе выступления на пленарном заседании Петербургского международного экономического форума.more

  • Какие компании заменят «Селигдар» и «Мечел» в индексе Мосбиржи
    Автор: Владимир Чернов, аналитик Freedom Finance Global 20.06.2025 17:53
    1200

    На Московской бирже 20 июня вступают в силу изменения в составе фондовых индексов в рамках плановой квартальной ребалансировки.more

  • Сбудется ли прогноз Романа Андреева про укрепление рубля
    Автор: Елена Болотина 20.06.2025 16:13
    1258

    Финансовый аналитик и опытный трейдер Роман Андреев в интервью на своем канале «Vernikov100 – инвестирование» дал обстоятельный комментарий по ситуации на фондовых и сырьевых рынках, а также поделился взглядом на перспективы рубля и американского рынка. В центре обсуждения оказались нефтяные бумаги, движение индекса Мосбиржи, возможное поведение нефти до конца года и долгосрочные сценарии по доллару.more

  • Что конфликт между Израилем и Ираном означает для рынка США
    Автор: Яна Кудрявцева 20.06.2025 15:50
    1260

    На фоне растущей геополитической напряженности инвесторы заняли оборонительные позиции. Риски эскалации конфликта на Ближнем Востоке привели к снижению основных фондовых индексов американского рынка, умеренному росту цен на нефть и золото, а также к повышенному спросу на защитные активы, включая доллар и гособлигации.more

  • Удастся ли iOS 26 спасти акции Apple
    Автор: Яна Кудрявцева 20.06.2025 15:40
    1231

    Apple представила ряд новых функций для iPhone, Mac и других устройств на ежегодной конференции разработчиков WWDC. Однако инвесторы остались равнодушны: акции компании снизились более чем на 1% сразу после мероприятия.more