Как работает Machine Learning.

Различных методов Machine Learning очень много, но все они работают примерно одинаково. Это и нейросети, и леса-деревья, и Байесовские классификаторы, и многое другое. Найти и прочитать как ходят-как сдают, как обучают и проверяют правильность обучения — не проблема.
Но пользователи часто забывают одно правило: мусор на входе — мусор на выходе. Для обучения недостаточно сделать обучающую последовательность с правильными ответами — результатом будут хорошие результаты на обучающей последовательности, и никакие на реальных данных.
Таким образом, мы должны четко себе представлять, чему именно мы учим, и это вовсе не правильные ответы, а правильные ответы на правильные вопросы. Если не хотите получать дурацкие ответы — не задавайте дурацкие вопросы.

Т.е., для обучения МЛ нам нужно сформулировать адекватные вопросы и ответы на них. Только в этом случае метод МЛ реально обучится и будет реально работать не только на обучающейся последовательности.
Вопрос ещё в том, что обычно мы не знаем и правильных вопросов.
Но это дело поправимое Мы формируем какую либо гипотезу, например — три солдата показывают нам то-то и то-то. Мы как-то ищем этих трёх солдат на истории, там же находим ответы на них, обучаем на этом метод МЛ, проверяем на независимом отрезке истории, и выясняем — действительно ли эти 3 солдаты так важны для нашей торговли, или ну их на фиг.
Понятно, что и при обучении и на реале нам надо задавать МЛ только значимые вопросы, а именно, показывать МЛ не все данные подряд, а только наших трёх солдат.
Ну, а если солдаты воевать не желают, проверяем значимость вороны на шесте.) И так, пока действительно не найдем что-то стоящее.

Данная публикация является личным мнением автора. Мнение владельца сайта может не совпадать с мнением автора.

machine learning машинное обучение трейдинг прогнозирование классификация

3Qu

Москва

473

12 905

с 11 декабря 2019

27 Комментариев

gurovofficial
01 января 2021, 22:39
Сразу видно новичков:) машинленинг и диипленинг разные вещи, а вы в кашу замещали всё:)
0
bocha
01 января 2021, 22:40
Представил трех солдат. Представил, что они могут показать...
Machine Learning — сила!!!
+1
Иван Файртрейдов
02 января 2021, 00:14
Диплернинг тоже вроде неоднороден, несколько метод, по идее при скармливании достаточных данных должен быть не хуже человека, с чистых мд дак точно
0
Roman Ivanov
02 января 2021, 00:23
Началось с ML, а потом перетекло «мы формулирует гипопезу». И где же тут сила ML?
0

Читайте на SMART-LAB:

Фавориты и аутсайдеры: на какие акции ставят инвестдома

В июле 2026 года подскочила волатильность на российском рынке акций: Индекс МосБиржи опускался до нового минимума за 3,5 года, но затем резко отскочил. Геополитика и уровень ключевой ставки ЦБ...

Альфа-Инвестиции

17:53

Открываем идею «лонг Промомеда» с ожидаемой доходностью до 10%

Запускаем краткосрочную идею — лонг акций Промомеда, российского производителя инновационных лекарственных препаратов. Рассчитываем на переоценку бумаг после публикации сильной отчетности...

Т-Инвестиции

18:02

ПАО «ЭсЭфАй» подвело финансовые итоги по РСБУ за первое полугодие 2026 года

ПАО «ЭсЭфАй» объявляет результаты деятельности за первое полугодие 2026 года, подготовленные в соответствии с российскими стандартами бухгалтерского учета. По итогам первого полугодия холдинговая...

SFI

18:09

Газпром: отчет по РСБУ за 2-й квартал показывает улучшения, но акции пока только падают

Газпром опубликовал отчет по РСБУ Напоминаю, что отчетность РСБУ у Газпрома показывает результаты «ядра» т.е. газового бизнеса без Газпромнефти, Сахалин-2, Газпромбанка и тд. Хотя...