Market Vectors / Financial One

Исследователи опровергли значимость проверки алгостратегий на исторических данных

Исследователи опровергли значимость проверки алгостратегий на исторических данных Фото: lynnesnissanwest.com
3155

Специалисты Quantopian доказали опытным путем низкую эффективность бэктестинга алгоритмических стратегий.

Согласно выводу экспертов, стратегии, которые разрабатываются и тестируются на истории, чаще всего подвержены высокой вероятности подгонки параметров под исторические данные (на сленге алгоритмических трейдеров это называется «оверфитом», от английского overfit). То есть стратегия, демонстрирующая в теории хорошие результаты, в реальной торговле начинает генерировать убытки.

Томас Вики, Эндрю Кэмпбелл, Джастин Лент и Джессика Стафф изучили 888 алгоритмических стратегий, разработанных и протестированных на веб-платформе Quantopian внешними пользователями, преимущественно частными трейдерами. Период тестирования составлял 6 месяцев. Было обнаружено, что коэффициент Шарпа, часто используемый в момент тестирования и отбора стратегии, дает худшие результаты в будущем. Наиболее интересными показателями стали волатильность и максимальная просадка (дродаун) портфеля.

В ходе исследования специалисты Quantopian строили параметрическую линейную регрессию и считали коэффициент корреляции между выборкой (in sample - IS), на которой тестировалась стратегия, и вне нее (out of sample - OOS). В результате, полученный коэффициент Шарпа на выборке IS находился в отрицательной корреляции с выборкой OOS. То есть разработчик стратегии получал прямо противоположные результаты — вместо растущего коэффициента Шарпа по итогам бэктеста происходил обратный процесс, его снижение на реальных данных.

Также были изучены регрессоры, которые все же могут позволить предсказывать будущий коэффициент Шарпа, исходя из данных, полученных на тестовой выборке. Наилучшим признано соотношение доходностей между 95-м процентилем и 5-м процентилем.

Авторы резюмируют, что судить о прибыльности стратегии только по результатам бэктеста неправильно, поскольку есть высокая вероятность ввести себя в заблуждение. Эксперты говорят, что альтернативой традиционному бэктесту может стать применение процедур машинного обучения, в ходе которых используется так называемая перекрестная проверка (кросс-валидация). Именно она позволяет понять эффективность торговой стратегии с большей достоверностью.




Теги: Quantopian



Куда вложить деньги в 2018 году, или криптовалюту не предлагать

Осторожно, мошенники! Какие документы нельзя доверять посторонним

Как выбрать негосударственный пенсионный фонд. Пошаговая инструкция

Загрузка...

Вернуться в список новостей

Комментарии (0)
Оставить комментарий
Отправить
Новые статьи
  • Топ-5 дивидендных историй на российском рынке
    Автор: fomag.ru 17.09.2021 17:36
    1859

    Дивидендные стратегии компаний обсудили эксперты на онлайн-заседании Комитета по финансам и рынкам капитала Ассоциации менеджеров.more

  • Цена на газ в Европе может превысить $1000
    Автор: fomag.ru 17.09.2021 16:41
    2251

    Цена на природный газ в Европе растет практически непрерывно с конца апреля, а на текущей неделе котировки обновили исторические максимумы: так, на торгах 15 сентября максимальная стоимость голубого топлива достигала почти $970 за тысячу кубометров.more

  • Как вылезти из долговой ямы
    Анатолий Гавриленко, председатель экспертного совета по финансовой грамотности при Банке России 17.09.2021 15:01
    1992

    Обсудили ситуацию с кредитами и пути решения с председателем экспертного совета по финансовой грамотности при Банке России Анатолием Гавриленко.more

  • Готов ли «Русал» к «зеленым» стандартам
    Автор: аналитики «Финама» 17.09.2021 14:31
    1939

    Возврат к выплате дивидендов поднимет акции «Русала» выше 100 рублей.more

  • Что думают в Goldman Sachs по поводу повышения стимулов
    Автор: аналитики «Фридом Финанс» 17.09.2021 14:15
    1800

    Рынок США: торги в спокойном режиме.more