Market Vectors / Financial One

Исследователи опровергли значимость проверки алгостратегий на исторических данных

Исследователи опровергли значимость проверки алгостратегий на исторических данных Фото: lynnesnissanwest.com
3485

Специалисты Quantopian доказали опытным путем низкую эффективность бэктестинга алгоритмических стратегий.

Согласно выводу экспертов, стратегии, которые разрабатываются и тестируются на истории, чаще всего подвержены высокой вероятности подгонки параметров под исторические данные (на сленге алгоритмических трейдеров это называется «оверфитом», от английского overfit). То есть стратегия, демонстрирующая в теории хорошие результаты, в реальной торговле начинает генерировать убытки.

Томас Вики, Эндрю Кэмпбелл, Джастин Лент и Джессика Стафф изучили 888 алгоритмических стратегий, разработанных и протестированных на веб-платформе Quantopian внешними пользователями, преимущественно частными трейдерами. Период тестирования составлял 6 месяцев. Было обнаружено, что коэффициент Шарпа, часто используемый в момент тестирования и отбора стратегии, дает худшие результаты в будущем. Наиболее интересными показателями стали волатильность и максимальная просадка (дродаун) портфеля.

В ходе исследования специалисты Quantopian строили параметрическую линейную регрессию и считали коэффициент корреляции между выборкой (in sample - IS), на которой тестировалась стратегия, и вне нее (out of sample - OOS). В результате, полученный коэффициент Шарпа на выборке IS находился в отрицательной корреляции с выборкой OOS. То есть разработчик стратегии получал прямо противоположные результаты — вместо растущего коэффициента Шарпа по итогам бэктеста происходил обратный процесс, его снижение на реальных данных.

Также были изучены регрессоры, которые все же могут позволить предсказывать будущий коэффициент Шарпа, исходя из данных, полученных на тестовой выборке. Наилучшим признано соотношение доходностей между 95-м процентилем и 5-м процентилем.

Авторы резюмируют, что судить о прибыльности стратегии только по результатам бэктеста неправильно, поскольку есть высокая вероятность ввести себя в заблуждение. Эксперты говорят, что альтернативой традиционному бэктесту может стать применение процедур машинного обучения, в ходе которых используется так называемая перекрестная проверка (кросс-валидация). Именно она позволяет понять эффективность торговой стратегии с большей достоверностью.




Теги: Quantopian

Вернуться в список новостей

Комментарии (0)
Оставить комментарий
Отправить
Новые статьи
  • Почему власти продлевают обязательную продажу валютной выручки
    Автор: Маргарита Вахрушева 23.04.2024 20:43
    221

    Что думают регуляторы о продлении требования по возврату валютной выручки, как это повлияет на экспортеров и курс рубля, рассказала Татьяна Вершигора на YouTube-канале «РБК инвестиции».more

  • Что может стать причиной краха рынка акций США
    Автор: Яна Кудрявцева 23.04.2024 20:34
    226

    Что происходит с фондовым рынком и экономикой США, рассказал инвестор Кевин, автор YouTube-канала «Meet Kevin».more

  • Несколько интересных идей на российском рынке
    Автор: Яна Кудрявцева 23.04.2024 18:45
    269

    На какие бумаги обратить внимание инвесторам на российском рынке, рассказал Тим Мартынов, автор одноименного YouTube-канала.more

  • Каковы планы Positive Technologies на 2024 год
    Автор: Маргарита Вахрушева 23.04.2024 18:40
    196

    Перспективы российского рынка кибербезопасности, возвращение налога на прибыль и планы по допэмиссии акций обсудили директор по стратегии ФГ «Финам» Ярослав Кабаков и аналитик Леонид Делицын с представителями Positive Technologies на YouTube-канале «Финам инвестиции».more

  • Что происходит с инфляцией в 2024 году
    Автор: Маргарита Вахрушева 23.04.2024 18:34
    217

    Какое решение может принять ЦБ на ближайшем заседании и как регулятор пересмотрит прогнозы по ключевым макропоказателям, обсудил Константин Бочкарев с экспертами на YouTube-канале «РБК инвестиции».more