26 августа 2019, 09:00
Data Labeling. Разметка данных для моделей машинного обучения.
Приветствую комерады! :)
Продолжая тему околорыночничества, выпустил я новый ролик. В котором рассмотрел как размечать данные для моделей машинного обучения и как это поможет увечиться количество профитных сделок.
Тема интересна тем, что разметка данных может является частью автоматического пайплайна, для нахождения и тестировния стратегий.
В целом эта первая часть обещенного примера использования Tensorflow Serving. Вторую часть зарелизю на днях. Уж больно много времени занимает создание видео )
Ссылка на репозиторий с кодом: github.com/CloseToAlgoTrading/CodeFromVideo
P.s. Админы, а можно мне как то доступ в раздел алготрайдинг заиметь?
Продолжая тему околорыночничества, выпустил я новый ролик. В котором рассмотрел как размечать данные для моделей машинного обучения и как это поможет увечиться количество профитных сделок.
Тема интересна тем, что разметка данных может является частью автоматического пайплайна, для нахождения и тестировния стратегий.
В целом эта первая часть обещенного примера использования Tensorflow Serving. Вторую часть зарелизю на днях. Уж больно много времени занимает создание видео )
Ссылка на репозиторий с кодом: github.com/CloseToAlgoTrading/CodeFromVideo
P.s. Админы, а можно мне как то доступ в раздел алготрайдинг заиметь?
Ввод/Вывод работает исправно на Альпари. Выводят быстро, выводил суммы и от 100 тысяч рублей и от 1 000 000 рублей — нареканий НОЛЬ.
Технической поддержки больше в Альпари — нету, отрисовка графи...
Марэк, )))))
Здравствуйте! ТА Формируется новый повышающий канал, проходим отметку 138,70 р и выходим на 144,35 а там точнее определимся с границами.
Тазик Огурцов, Конечно пойдет… через ГОДИК другой ).
В ЭТОМ 2024 году ВЛАСТИ специально включили вам Материальную выгоду, что бы вы знали свое место ). Вот вывернут вам карманы и сразу успокоитес...
Ну ладно, на америку по молились, пора и на Россию взор обратить.
Байдэн подписал закон о КОНФИСКАЦИИ 300 милиард $ Российских активов в Европейских банках и у себя в США.
Конфисковывать будут зам...
Что это битховин исполняет? Халвин шмалвинг же, или решили раздать его всем желающим под халвинг его и забыть уже о нём как о явлении и символом эпохи грязных денех?
В Июне
Алексей Киселев, нашёл сообщения топикстартера Ризви в телеграме: 17 марта 2022 года, он сообщил, что заключил мировое соглашение с брокером Тинькофф. Детали мирового не раскрываются согласно пункт...
Anton Palyhc,
Там, где будет цена закрытия дня. Закроется на 2400, значит выйду на 2400.
Я не имею возможности сидеть возле экрана целый день. Работаю.
Поэтому для меня существуют только дне...
Роман Бабанин, ничего, Китай умеет все и даже лучше всех в мире. Срать на санкции, аэрофлот был есть и будет
«Уж больно много времени занимает создание видео» — а оно надо?!
Показывать тексты и… коды(!) в видео…
Выложу коды на гитхаб в следующий раз!
Хороший тон — предупредить, что ролик на нерусском.
Поблагодарить за конструктивную критику — тоже.
Берите пример с Eugene Logunov как надо топики оформлять.
Люди, которые способны понять смысл Вашего ролика видосы в принципе не смотрят. Потому что передача информации через видеопоток является ужасным способом сказать что-то умное.
Однако, как я уже писал ранее, и возможно сразу отвечу VladMih, создание видео помогает понять как надо делать правильные и доступные презентации различного материала, а так же потренировать тот самый английский. При этом хотелось бы, и что то полезное рассказывать :).
У каждого ж свои цели :) и главное я же ничего не продаю и не рекламирую.
Denis, тренировать английский надо в школе ангийского под присмотром грамотного преподавателя. Их (школ) сейчас много. Можно даже по скайпу с native speaker созваниваться и трепаться про общемировые ценности.
А уровень презентации… Не смотрел. Но если Вам самому понравилось что получилось — поздравляю.
Denis, не-не. Не осуждаю ни разу.
Просто информирую Вас, что если Вы заинтересованы в том, чтобы с Вашим материалом познакомилось максимальное количество читателей (в результате чего Вы сможете получить максимальную обратную связь), то формат голого видео — это выстрел мимо мишени.
Если бы Вы сопроводили видео текстовой расшифровкой хотя бы основных тезисов, возможно, на материал бы обратило внимание больше людей с опытом.
Думаю, в следующий раз так и сделаю.
И не только машинлернинга.
Но ютюб конечно всё стерпит ))
Я просто размечаю данные, уже готовых сигналов, что бы получить вероятность получения прибыли.
Вообще видео должно было быть про тенсорфлоу сервинг, но сразу начинать с готовой модели, мне показалось не очень хорошо. Так и родилась идея в кратце описать подготовительный этап.
зы. а книга у него правда хорошая получилась, много полезных мыслей.
Однако, когда гугл выпустил тенсорфлоу 2. Я прямо порадовался за них. У них там теперь керас встроен, и все как у людей стало. Плюс мне очень нравится их пайплайн для продакшена моделей. Не знаю есть ли в пайторче что то подобное.
Тенсорфлоу и его применение везде и всяк… это такое мое хобби :)
Итак, термин data labeling, который я перевел как разметка данных, использует в области машинного обучения, и грубо говоря обозначает сопоставление входных значений с выходными.
Так как мы используем способ машинного обучения с учителем, суть которого в том, что мы обучаем нашу модель принудительно по принципу дейтвие-реакция. Мы подаем на вход некоторые значения, потом то что получилось на выходе сопоставляем с нашими эталонными значениями, считаем как сильно модель ошиблась (насколько сильно отличается выход системы от эталонного значения), коректируем параметры модели и породолжаем обучение.
Так вот, входные значения обычно называют features, а выходные(эталонные) labels.
Применительно к трейдингу, в видео я попытался показать как можно провести это самое сопоставление входных данных (features), к эталонным значениям (labels).
Что же касается пайплайна (pipeline), то я имел ввиду некоторую автоматическую последовательность действий, которая бы приводила нас от сырых данных на входе, в эту последовательность, к готовым данным, для обучения моделей, на выходе.
Стало ли от этого более понятно :)… не уверен.
зы. Возможно надо подумать о целевой аудитории и действительно существенно расширить материал.
По поводу языка в видео, я все еще думаю, но практика показывает, что англоговорящую аудиторию нарастить проще. И опять же, не стабильно в русскоговорящих странах, вдруг ютуб закроют :)