Насколько можно доверять результатам тестов в ТС-Лаб?
Итак, общими усилиями группы реализована первая пробная стратегия на кубиках в ТС лаб, получены некоторые данные на истории, в связи с чем возник вопрос насколько можно доверять результатам тестов ТС-Лаб? Какие есть подводные камни при тестировании?
Спасибо за Ваши коментарии и +++
Самое неприятное в любой стратегии — overfitting. Т.е. когда в стратегии много параметров, то на исторических данных подогнать модель под имеющиеся котировки так, чтобы она выдавала максимум профита, крайне легко, но вот на реальных торгах будет лажа. За сим необходимы:
1) Forward testing — берём модель, подбираем оптимальные параметры, берём 1-2 торговых дня, скармливаем модели и смотрим, насколько профитная модель. Отсюда следует пункт 2.
2) Робастность модели. Т.е. при наличии некоторого количества параметров насколько чувствителен PnL к изменению параметров. Т.е. что будет, если взять параметры «по соседству». Де-факто необходимо строить «тепловые карты», где в качестве осей данных берутся все возможные значения параметров на сетке, в качестве оси ординат — PnL. При большом количестве параметров придётся изгаляться, конечно, — строить 3-хмерные сечения и т.п.
3) Учёт проскальзываний рынка и объёмов в стакане. Т.е. если торговать одним контрактом — спору нет, но обычно торгуемый объём поболее будет, так что и это надо оценивать. Плюс скорость выставления заявки и т.п.
Тесту то можно доверять — по крайней мере можно всегда промотать график и посмотреть, правильно ли открывались и закрывались. Но проблема имхо не в этом.
Иван Тишевской, в том что если запустить тслаб торговать, то результат может отличаться от ожидаемого. Иногда весьма значительно. Хотя это уже как повезет.
ни на сколько… надо вручную просматривать сделки… т.к у каждого вида приказов свои глюки...
наиболее точны по ценам открыте-закрытие по рынку… если запретить торговлю на первой свече дня
Продажи новых легковых автомобилей в России в 2025 году могут составить 1,65 млн единиц, что на 6% больше г/г – ТАСС Продажи новых легковых автомобилей в России в 2025 году могут составить от 1,5 млн ...
Ойл Ресурс Групп и ее новый выпуск облигаций Несмотря на предновогоднее ралли на рынке акций, я продолжаю отслеживать и перспективные облигационные выпуски. ЦБ заверил нас, что период высоких ставок ...
Вадим, а почему только три? Каждый год на рынке десятки хороших идей и не только по облигациям.
А сидеть в 7 выпуске до оферты конечно заманчиво (+76% за 76 дней), но я, пожалуй, не буду потому ...
Mixer133, А я наоборот приободрился. Вот если бы он начал топить за ЕТ, я побежал бы отсюда роняя тапки. А он наоборот начал против ЕТ гнать волну. И даже как то спокойнее стало. Думаю, может и не ...
1) Forward testing — берём модель, подбираем оптимальные параметры, берём 1-2 торговых дня, скармливаем модели и смотрим, насколько профитная модель. Отсюда следует пункт 2.
2) Робастность модели. Т.е. при наличии некоторого количества параметров насколько чувствителен PnL к изменению параметров. Т.е. что будет, если взять параметры «по соседству». Де-факто необходимо строить «тепловые карты», где в качестве осей данных берутся все возможные значения параметров на сетке, в качестве оси ординат — PnL. При большом количестве параметров придётся изгаляться, конечно, — строить 3-хмерные сечения и т.п.
3) Учёт проскальзываний рынка и объёмов в стакане. Т.е. если торговать одним контрактом — спору нет, но обычно торгуемый объём поболее будет, так что и это надо оценивать. Плюс скорость выставления заявки и т.п.
Это навскидку.
Потом 1 контракт на реале.
Обычно это сразу отрезвляет.
у меня — да.
Вы спросили — я ответил, если не прав — буду рад.
Иван Тишевской, качайте здесь mfd.ru/export
наиболее точны по ценам открыте-закрытие по рынку… если запретить торговлю на первой свече дня