Блог им. goryinyich

Автоматический экспорт данных с Финама перестал работать. Кто-то уже нашел решение этой проблемы?

Интересует именно способ как-то похачить сайт Финама, iss moex, yahoo.finance, etc. не предлагать
★10
39 комментариев
Вообще существует, из питона можно selenium'ом совершать все нужные действия в невидимомом хроме. Работы (писать код) на 15 минут.
avatar
Я не пью!, питон нужно знать…
avatar
если кто найдёт способ в личку скиньте
avatar
Artemunak, Скинут тебе, скинь мне :)
avatar
Frend, 
качай пока не отключили
smart-lab.ru/blog/617859.php
avatar
Artemunak, Спасибо
avatar
Я не пью!, 15 мин? Недавно полтора часа возился только чтобы подключить селениум к браузеру. Там глючные драйвера
avatar
А что там подключать? У меня он сразу цепляет хром
avatar
Я не пью!,… вроде работает, но это тот еще костыль.
avatar
Я не пью!,
проще расширение для Chrome или Firefox написать на JS чем возится с Selenium, тем более что через Selenium что через расширение делать нужно будет одно и тоже, но расширение проще отлаживать и ничего дополнительно ставить не нужно.
avatar
Но конечно было бы правильнее понять как вычисляется token в их новых ссылках на котировки…
avatar
Ну видимо теперь только ручками. https://www.finam.ru/profile/moex-akcii/gazprom/export/

Там же указано "Автоматический импорт котировок с сайта запрещен"
avatar
chizhan, они гугловую рекаптчу поставили для получения токена.
Пора привыкать к новой реальности. Из Финама пошли МИНУСОВЫЕ ПОТОКИ информации. И пошли ведь… Пока -37,63. Что будет дальше-пока туманчик. Где-то в регламенте Финама есть видно такой п., пп, главы, части.., раздела1.
Объяснить это на самом деле очеееень легко. Ну смотрите Финам ДОПЛАТИТ ВАМ за то, что ВЫ сумеете прочитать. Такой вот опциончик. Все просто препросто: когда t=36.7 платить никому не надо, а вот когда t=  -37.6 ну тогда опциончик однако. 
Добро пожаловать в новый мир обнулений и не только.
avatar
А чем iss moex не угодил? Мы пока что на него перешли…
avatar
Lexuz77, 
1. там тиковые данные только за последнюю сессию
2. там только текущие инструменты мосбиржи
avatar
Lexuz77, и если не ошибаюсь — 3т.р. в месяц.
И не радуйтесь что можно качать бесплатно. Я это проходил, пока не сравнил данные с другими. Там специально выставленные искажения. В принципе сначала даже написал шумодав (ибо искусственные шипы и в цене и в объёме космические), но потом решил что это колхозный путь
avatar
forum.finam.ru/posts/t109844-Avtomaticheskii-ehksport-dannykh
люди изливают свое негодование,
вообще крайне тупая политика, сделали бы сервис получали бы копеечку, небольшую бы но получали, скажем 30 баксов в месяц, тыща человек — 30 штук
Иван Файртрейдов, если готовы платить, то платная подписка для скачивания данных есть на МФД. Неужели на финаме свет клином сошелся?
avatar
ch5oh, там тики один день минутки год, библа голимы dll — под линуксом не пашет
Иван Файртрейдов, странно. Они даже бесплатно дают тики скачать за большой период времени. Прямо с сайта.
avatar
ch5oh, хм, правда, надо приблуду сделать чтоб качать из программы тогда
Вот был уже топик здесь:
smart-lab.ru/blog/614712.php

По теме — selenium не обязательно на питоне. Можно на разных языках использовать. 
Пока это видится единственным вариантом.
avatar
ыы, а я думаю, че это моя качалка не запустилась).
avatar
Можно писать тиковый поток в БД и считать самостоятельно.
avatar
SergeyJu, да мне нужны дневные бары, раньше я пару раз в месяц свою шарманку запускал, насчитывал по ним веса — и ребалансился. Как-то ради них постоянно держать на компе какие-то процессы и за всем этим следить — очень неохота…
avatar
MadQuant, а чем вам дневные бары с iss не подходят?
avatar
Михаил, может, у меня руки кривые, но я не смог заставить это нормально работать, особенно если котиры с 2000-го года нужны. То есть выгрузить за последний месяц — вроде без проблем, за 20 лет — это не работает.
avatar
MadQuant, скорее всего на сервере ограничение стоит по объёму одного запроса. Попробуйте кусочками выкачивать.
avatar
MadQuant, с тиками сложнее, но бары от минуток и выше обычно можно через апи брокера дёрнуть. АйтиИнвест какое-то время назад снял ограничение на скачивание баров М1.
avatar
а чем  web.DataReader в питоне плохо, если дневные бары? Я в смарткоме качаю
avatar
broker25, может, у меня руки кривые, но по некоторым тикерам скачивается какая-то хрень, к реальным котировкам отношения не имеющая. Кроме того, там на глубину ограничения вроде бы, а я привык с 2000-го данные с финама грузить без проблем
avatar
Да, удобно было… Придётся снова делать как-то удобно.
В кошки-мышки с ними играть как-то лень, хочется сделал и забыл, поинтереснее задачи есть.
Проблему эту не решить.
Это же не ошибка и не баг. Это политика такая. Ну обойдём мы эту капчу, они поставят другую. Мне каждый месяц с ними в кошки-мышки играть не охота. Полный — перманентный отказ.

MOEX ISS подключили, вот реализация: github.com/AlexWan/OsEngine/blob/master/project/OsEngine/Market/Servers/MOEX/MoexIssDataServer.cs
Трейдов действительно нет. Фьючерсы за 2 года последние. Акции вроде с начала. Костылей хватает... 
Сегодня сел за MFD. Тоже будет с открытым кодом в этом же репозитории. В это воскресенье.
Алексей Ван , огонь! спасибо!
avatar
В общем с помощью расширения для Chrome можно качать с Финама, но для каждой новой загрузки нужен новый токен.
Сгенерили токен, загрузили один файл и т.д.
avatar

теги блога MadQuant

....все тэги



UPDONW
Новый дизайн