Железо для исследования рынка

24.11.2025 исполняется шесть лет, как работают мои парсеры на фонде и срочке. 



Более ранние сборки работали на второй двухядерной малине с 1 гб ОЗУ, можно парсить данные даже на процессоре мощного роутера, при желании) 

Были интересные проекты, где дамп сливался через облака на харды (внутри решалась задача византийских лампасов), оповещалки через телеграмм ботов чисто для себя, удобства ради, из излишевств. 
Интересный сложнейший проект парсера был в 2023 году, пробрасывал канал, собирая данные с облаков на фтп, далее кодирование через радио лоры и через мышь на местности (два-три прыжка без потери пакетов внутри любого крупного города на открытым частотам, на межгород не годится (надо было либо мышь поднимать очень высоко, либо мучаться с направленными антеннами), дальше сигнал кодировался (каюсь-каюсь) пробрасывался через открытые незашумленные каналы спутников сатком (эту часть уже писали за меня, это было самое простое решение для того, чтобы кидать информацию на дальняк). Отправляли через рации и спутник цифру (пинг средний получался большим, но главное 100% пакетов получали и эта задача выполнялась, ну и скорости хватало, 96 килобит в секунду на достаточно широком диапазоне, можно даже кидать картинки, но стояла задача как можно меньше засорять эфир, всегда уважали других людей))). 

В целом все оборудование стоит очень дешево, были бы руки и голова. Ну и благодаря собранной информации удалось разработать кучу моделей поведения людей, мне, как социологу, это интересно в первую очередь. Часть из них я уже показывал, но данных много — будет настроение, зимой выкачу на СЛ новых интересный моделей :-)