Информация
Блог им. tester37
Кто хочет обучить свою ИИ на гигабайтах исторических данных Ethereum - обращайтесь
- 04 февраля 2026, 17:26
- |
В настоящее время ресерчу во всю ширину и глубину ончейн данные Ethereum на нодах одной очень мощной команды.
Но ноды у многих есть. Но не у всех есть настроенная Kafka, которая темный лес из терабайтной мешанины превращает в структурированные потоки, на которых как раз и можно обучать LLM-ки разные.
Я когда внутрь этих данных погрузился, мне стало категорически понятно, что это на порядок полезнее чем какой-нибудь «тех-анализ».
И то, что это не все пользуют, говорит о простом. Не всем это очевидно, не всем доступно и у многих мозг зомбирован всем околорыночным столетним движем.
Предлагаю законтачить, кому интересно, еще и вот по какой причине.
Сейчас стратегия у той команды содержит в себе элемент мощного демпинга. Поэтому если вы пользуете топики Кафки каких то других провайдеров и может вас цена не устраивает или качество или отношение :) То велком. Будет интересно.
Ну и как обычно. О неактуальности приглашения/предложения будет обязательно сообщено, если станет неактуальным. (Сам пост наверное не буду удалять, чисто для истории оставлю)
Так трейдерам же offchain интересны…
Synthetic, offchain — это про сантимент? Многие «сигналы» от KOL и настроения в оффчейне — основаны на движениях в ончейне и на анализе этих движений. Я честно скажу, что сам не очень понимаю, как на этом обучать LLM. Но точно знаю, что есть люди которые понимают и занимаются этим. Я примерно представляю как просить анализ у продвинутых моделек и как они этот анализ будут реализовывать (часто генеря некий код в реалтайме для получения ответа), может вот обучение в том заключается — что где-то у моделек самый полезно работающий код, алгоритм сохраняется и потом она уже его не генерит а просто к нему обращается.
Или я вообще не по той теме Вам сейчас ответил? :)
Вопрос — тебе за 4 года не пришло понимание, что зарабок с рынка и всякие классные штучки, базы данных и «рисерчи» идут своими параллельными дорожками?
Тебе не жалко так свое время тратить в пустую? Жизнь ведь не вернуть назад. Не отмотать часики.
Так я до сих пор свой проект «пилю» именно на Orleans. По прежнему «акторы» — это лучшее, с помощью чего можно в виде кода управлять, маршрутизировать потоки и вычисления между рыночными сущностями. Kafка — это же просто «тула», которая данные может пропихивать внутрь Orleans из ноды. Но не обязательно в Orleans, куда угодно может. У команды с которой сейчас плотно работаю — используется для построения индексов для API. И они готовы это и на сторону «толкать» :)
Что касается «тратить время впустую». Откуда такой вывод? То что в моем личном проекте динамики не наблюдается? Ну да, есть такое… но это не значит, что это потому что я пинал не то, что надо эти 4 года.
А, еще тэйк про параллельность курсов технологий и заработка на трейдинге (или околорынка) — где то да, а где то и нет. Ну да, я — вообще не коммерс — это так. Мне интереснее технические всякие штучки.
«Мне интереснее технические всякие штучки» а зачем тогда трейдинг? Или около трейдинг. В ИТ заработок раз 3 больше чем писать програмки для каких-то команд, которое что-то там готовы на сторону.
В этом твоем блоге нет ответа на самое главное — зачем тебе это всё. Без этого главного ответа рассуждате о КафкаШмафка уж как-то совсем без смысла. Да и совсем не тот сайт. Технари это Реддит. За 4 года около нелувого фидбэка уж должно было стать ясно.
Я думаю, какая то часть местной аудитории интересуется криптой. Из них вполне могут быть те, которым интересно иметь удобный доступ к структурированной ончейн дате. Это не очень просто получить, но очень полезно.
Я причем? Ну мне хочтеся подольше поработать с этой командой и как можно скорее быть ей чем то полезным. А если при этом наладить связи с теми, кто потребляет в больших количествах ончейн-данные, это тоже было бы здорово.
… я не пишу для них программы, кстати. У них программисты по-круче будут да и стек не мой :)
«Это не очень просто получить, но очень полезно» чем тебе помогло? Зачем тебе кто-то, если у тебя есть этот доступ и это полезно? Сколько уже миллионов смоз извлечь из этой пользы? Если ноль, то с чего ты решил, что это полезно?
Просто трейдер,
А мы общались раньше когда-то, может вообще знакомы? Не сразу понял, что твои вопросы как-то не очень сильно про заглавное мое это сообщение :) Не сразу понял, потому что есть места в Сети, где стиль таких вопросов ко мне уместен и даже мне понятен и имеет от меня благодарный отклик.
Доступ у меня есть как раз от команды, иначе он был бы и очень дорогой и время его пользовать было бы сильно меньше. Миллионы пока не извлек. На пути к этому. Но это всего-лишь промежуточная станция :)
Изначально топик был обращен к тем, кто уже понимает зачем им может быть нужна Kafka прикрученная к эфировской ноде. Подумал, что здесь вполне может быть человек 20 — которые это знают и которых мой пост может заинтересовать.
Сам не такой?
«что здесь вполне может быть человек 20 — которые это знают и которых мой пост может заинтересовать.» может и заинтересует, кто как и ты готов своей жизнью жертвовать ради исследования ради исследований. Тесты ради тестов. Программы ради программ. Не знаю, нужно ли лично тебе такой интерес. Может и нужно.
В целом мне уже надоело. Ответил чтобы не уходить тиной.
Жаль, что надоело. Потому что показалось, что тебе тоже интересна тема алготрейдинга, только более практично чем мне :) А мне практичности реально не хватает. И ещё от тебя получил одно подтверждение недавним своим мыслям. А именно, сейчас практически и не нужны таким как я (и таким как ты, наверное) команды и люди. Все же можно теперь через ИИ взять. И даже денег на это много не надо.
Наверное так. Но с командой все равно получается быстрее.
Сам на этом сайте что ищещь? Полезную информацию? :)