AP, а в чем проблема? прорыв не только в self attention, прорыв в алгоритме обратного распространения ошибки, который был тоже изобретен относительно недавно, прорыв в архитектуре сетей с сотней скрытых уровней, прорыв в том, что задачи линейной алгебры научились решать на GPU и т д

И кстати хранение информации в векторных БД и семантический поиск (RAG) — тоже прорыв в какой то степени, потому что дает доступ ко всей инфе в энтерпрайз и позволяет ее находить и использовать в LLM

А то, что куча денег (в основном — VC-шных) — сгорят — так это так всегда. Один какой нибудь Open AI все с лихвой окупит, когда выйдет на биржу

Assetman, 

(Но я люблю душой корявой 
дну врачиху средних лет...
У ней на мордочке лукавой 
слегка рассыпан интеллект)

DrManhattan, современные LLM прекрасно справляются с ролевыми функциями. Купите на plati ru код на Perplexity Pro на год аж за целых 400 руб и будет вам доступ и к GPT 5.0 и к Claude Sonet 4.0 и к Gemini 2.5 Pro и к Grok 4. Там отличный голосовой агент в мобильном приложении, которое не выпилено из российских магазинов приложений по iOS и Android, в РФ все будет работать без VPN.

Только не забывайте, что любая LLM всего лишь возвращает вам в диалоговом режиме ваш обогащенный исходный контент (как впрочем и 95% обычных людей в разговоре), поэтому прорывов и откровений не ждите. Общее правило такое — чем лучше вы знаете какую-либо узкую тему, тем примитивнее и беспомощнее будут выглядеть ответы моделей. Если же знания темы поверхностные — то LLM будет отличным собеседником.