Блог им. IgorPirog

Совет трёх ошибается в каждом втором решении. Каждая из трёх нейросетей по отдельности точнее — и обезьяна с дротиками тоже

Доля верных решений участников эксперимента

Идея «Совета трёх» простая: GPT, Claude и DeepSeek независимо предлагают портфель, а покупается только то, за что проголосовали минимум двое. Три головы должны отсеивать глупости одной. Через пять недель в таблице видно обратное: у Совета худшая доля верных решений среди всех участников.

Цифры с сайта на 20 ноября, 19:00 МСК. Доля решений, которые потом оказались верными: Claude — 75% (из 12 оценённых), обезьяна с дротиками — 70% (из 10), GPT — 68% (из 25), Профессор на теханализе — 60% (из 15), DeepSeek — 57% (из 14). Совет трёх — 50% из 24. То есть 12 решений из 24 — мимо.

Как это считается. Каждая покупка и продажа записывается в журнал с ценой и причиной. Через шесть и более дней бот сравнивает цену: выросла после покупки или упала после продажи — «верно», иначе «ошибка». Пример верного: 9 ноября Совет купил «Интер РАО» по 2,788 ₽ голосами Claude и DeepSeek, через семь дней бумага была на 2,3% выше.

Почему коллегия точнее не стала — доказать пока нечем, но версии две. Первая: большинство не равно точности. У самого точного участника, Claude, в Совете один голос из трёх, а на ребалансе 16 ноября не было и его: в протоколе записано «ИИ не вернул JSON», и портфель пересобрали двое. Вторая: Совет — это компромисс. Доля бумаги берётся средней из предложений, и решение, в котором никто не уверен до конца, проходит так же легко, как сильное.

Теперь неудобная для этого разбора часть. По деньгам Совет не худший, а второй. Неделя на рынке выдалась тяжёлой: фонд на индекс Мосбиржи потерял за неделю 6,03%. С 12 октября на 20 ноября: GPT +3,18%, Совет трёх +0,82%, Claude −1,31%, Профессор −2,74%, обезьяна −2,88%, DeepSeek −2,90%, индекс Мосбиржи −2,31%. Самый неточный участник обгоняет индекс и двух из трёх своих же членов.

Объяснение в том, чего счётчик не видит. Он считает направление, а не размер: ошибка на 1% портфеля и ошибка на 15% весят одинаково. А у Совета около четверти портфеля лежит в деньгах, поэтому за неделю он потерял 3,25% — почти вдвое меньше индекса. 18 ноября Совет разобрал новость о дивидендах и оферте «Циана» и записал в протокол: «покупку не проводить».

Вывод на сегодня: «чаще прав» и «больше заработал» — разные соревнования. Две недели назад я писал, что самый точный ИИ зарабатывает меньше всех. Теперь вторая половина той же картины: самый неточный идёт вторым. Выборка маленькая, 24 решения — не статистика, а повод смотреть дальше. Разбор по бумагам, какие именно 12 решений оказались ошибкой, — следующий шаг.

Вопрос к вам: что делать с Советом? Оставить правило «два голоса из трёх», дать решающий голос самому точному или распустить коллегию как лишнее звено?

Что за эксперимент. В 2022 году я потерял 10 млн ₽ на плече. Теперь проверяю, смогут ли нейросети торговать лучше меня и лучше индекса. GPT, Claude, DeepSeek и их «Совет трёх» управляют виртуальными портфелями по 1 млн ₽. Соперники — случайная Обезьяна с дротиками, теханализ, портфель аналитиков и индекс Мосбиржи. Каждое решение с причиной пишется в журнал, итоги — через год. Это учебный эксперимент, не советы.

Таблица и журналы всех сделок: ai-protiv-rynka.ru
Ежедневно в Telegram: t.me/ii_protiv_rynka

Учебный эксперимент на виртуальных деньгах, не ИИР.

Данная публикация является личным мнением автора. Мнение владельца сайта может не совпадать с мнением автора.
348 | ★1
2 комментария
Руби бабло пацан, не пали нам грааль.
avatar
За ИИ ещё платить надо. Обезьяна с дротиком получается самые эффективные решения. Эффективность это минимум затрат для достижения максимального результата, и у обезьяны это всего 10 решений и 70%. то есть 7% с каждого решения. У джипити 68/25=2,7% с каждого решения. У клоуда 75/12= 6,25. Вывод очевиден: обезьяна рулит. А если поподробней, чем меньше движений тем больше прибыли.

Читайте на SMART-LAB:
Фото
Доллар сбавил ход, но евро и фунт не перехватили инициативу
В пятницу индекс доллара DXY прибавляет около 0,1% и держится чуть выше 103,50, вблизи максимума 103,60. После нескольких недель роста доллар...
Фото
🔥Фокус на эффективность: Софтлайн показал двукратный рост скорр. EBITDA в 3К2026
Друзья, сегодня подводим итоги 3 квартала и 9 месяцев 2026 года. Ключевые финансовые показатели SOFL продолжают расти! По итогам 3 квартала: •...
Совкомфлот представил помежуточную отчетность за 9 месяцев 2026 года
Совкомфлот отчитался за 9 месяцев 2026 года значительно лучше предыдущего года. Выручка выросла на 67% г/г до $1 575 183 тыс., а выручка на основе...
Фото
Сетевые компании. Прибыль от передачи рухнула у всех в III квартале, но я всё равно планирую покупать их акции! Какие именно?!
3 ноября я написал пост по сетевым компаниям, где подробно разбирал финансовые отчеты по РСБУ за 3 квартал и 9 месяцев 2026г. Но на тот...

теги блога ИИ против Рынка

....все тэги



UPDONW
Новый дизайн