01 января 2021, 22:30
Как работает Machine Learning.
Различных методов Machine Learning очень много, но все они работают примерно одинаково. Это и нейросети, и леса-деревья, и Байесовские классификаторы, и многое другое. Найти и прочитать как ходят-как сдают, как обучают и проверяют правильность обучения — не проблема.
Но пользователи часто забывают одно правило: мусор на входе — мусор на выходе. Для обучения недостаточно сделать обучающую последовательность с правильными ответами — результатом будут хорошие результаты на обучающей последовательности, и никакие на реальных данных.
Таким образом, мы должны четко себе представлять, чему именно мы учим, и это вовсе не правильные ответы, а правильные ответы на правильные вопросы. Если не хотите получать дурацкие ответы — не задавайте дурацкие вопросы.
Т.е., для обучения МЛ нам нужно сформулировать адекватные вопросы и ответы на них. Только в этом случае метод МЛ реально обучится и будет реально работать не только на обучающейся последовательности.
Вопрос ещё в том, что обычно мы не знаем и правильных вопросов.
Но это дело поправимое Мы формируем какую либо гипотезу, например — три солдата показывают нам то-то и то-то. Мы как-то ищем этих трёх солдат на истории, там же находим ответы на них, обучаем на этом метод МЛ, проверяем на независимом отрезке истории, и выясняем — действительно ли эти 3 солдаты так важны для нашей торговли, или ну их на фиг.
Понятно, что и при обучении и на реале нам надо задавать МЛ только значимые вопросы, а именно, показывать МЛ не все данные подряд, а только наших трёх солдат.
Ну, а если солдаты воевать не желают, проверяем значимость вороны на шесте.) И так, пока действительно не найдем что-то стоящее.
Но пользователи часто забывают одно правило: мусор на входе — мусор на выходе. Для обучения недостаточно сделать обучающую последовательность с правильными ответами — результатом будут хорошие результаты на обучающей последовательности, и никакие на реальных данных.
Таким образом, мы должны четко себе представлять, чему именно мы учим, и это вовсе не правильные ответы, а правильные ответы на правильные вопросы. Если не хотите получать дурацкие ответы — не задавайте дурацкие вопросы.
Т.е., для обучения МЛ нам нужно сформулировать адекватные вопросы и ответы на них. Только в этом случае метод МЛ реально обучится и будет реально работать не только на обучающейся последовательности.
Вопрос ещё в том, что обычно мы не знаем и правильных вопросов.
Но это дело поправимое Мы формируем какую либо гипотезу, например — три солдата показывают нам то-то и то-то. Мы как-то ищем этих трёх солдат на истории, там же находим ответы на них, обучаем на этом метод МЛ, проверяем на независимом отрезке истории, и выясняем — действительно ли эти 3 солдаты так важны для нашей торговли, или ну их на фиг.
Понятно, что и при обучении и на реале нам надо задавать МЛ только значимые вопросы, а именно, показывать МЛ не все данные подряд, а только наших трёх солдат.
Ну, а если солдаты воевать не желают, проверяем значимость вороны на шесте.) И так, пока действительно не найдем что-то стоящее.
Читайте на SMART-LAB:
💰 Последний день с дивидендом за II квартал 2026 по акциям Займера
Друзья, обращаем ваше внимание, что сегодня, 8 октября – последний день для покупки акций Займера с правом на получение дивидендов за II квартал 2026 года. Реестр по дивидендам будет закрыт 10...
08.10.2026
⚡ Эфир по новым облигациям Софтлайн – прямо сейчас!
Дорогие инвесторы! Стартовал конференц-звонок для инвесторов по новым выпускам облигаций Софтлайн! Подключайтесь: https://my.mts-link.ru/j/softline/25861561501
UPD: запись выложили...
08.10.2026
EUR/GBP: Покупатели пускают в ход мощный аргумент
Кросс-курс EUR/GBP успешно протестировал уровень поддержки 0.8455 и теперь имеет все шансы закрыть день уверенным бычьим поглощением. Особого внимания заслуживает тот факт, что текущая белая свеча...
08.10.2026
Нефтяной срез: выпуск №11. Удалось хорошо заработать пока все паниковали, но будущее туманно. Аккуратный переход в нефтебазовую оборону, ОСТАЛОСЬ ТОЛЬКО ДВЕ ИДЕИ.
Продолжаю выпускать рубрику — Нефтяной срез. Цель: отслеживать важные бенчмарки в нефтяной отрасли, чтобы понимать куда дует ветер. Прошлый пост...
09.10.2026
5:13
Arbitrator, всегда так было есть и будет. одних почикали. придут другие, и так по спирали
Максим. На таких дедушках все и держится…
Lagehon, да заепались покупать. Брали по 16, распилило нах.й на 15.
Еду в шорте. Яндекс скорее всего будут выносить полностью.
имигрант, не смышал, чтоб оил ресурс на внешние рынки поставками занимался. Если есть у кого на эту тему информация, то поделитесь источником.
Владимир Московкин, да он в каждой ветке походу такое пишет, причем слово в слово. Только что, к примеру, в ветке Самолета прочитал.
Kaliningrad79, ну как бы не сложно постучать немного пальцами по клавиатуре.
«Сооснователь и крупнейший акционер девелоперской группы «Самолет» Михаил Кенин скончался от острой сердечной недостат...
Auximen, что-то я не заметил, чтобы по жалобам пользователей банили тех, про кого в первой части своего обращения написал Павел Пашкин. Тут одно тело уничижительно всячески высказывалось о россияна...
Николай К., может и не неделя, но и не годы. Процесс уже запущен, он необратим и будет нарастать…
В Берлине 10 октября состоялась масштабная антиправительственная акция протеста, участники котор...
Вангую, в скором времени традиционные вопросы: «Что случилось?!!!111», «Почему льют?!!! Все же хорошо». Всегда радовали «инвесторы», которые сидят месяцами в опасных бумагах, а потом, когда они законо...
Machine Learning — сила!!!