Что-то странное творится с Google DeepMind в последние дни…

18 июня компанию покинул Ноам Шазир – один из “архитекторов” современных нейросетей. Он был ключевым автором статьи Attention Is All You Need, которая предложила архитектуру transformer, положенную в основу всех современных моделей.

Это не все заслуги Ноама. Загибайте пальцы. Sparse Mixture of Experts – архитектура, когда для ответа задействуются не все веса модели, а только “эксперты”, то есть те ее части, которые реально разбираются в заданном вопросе. Mesh TensorFlow – инструментарий для тренировки сверхбольших трансформеров. Плюс Multi-Query Attention и Switch Transformers. Если говорить в общем, то Шазир не просто создал архитектуру трансформера, но и предложил трюки, которые делают ее рентабельной.

С Шазиром связана еще одна интересная история. Он пришел в Google аж в 2000 году, а после трансформера в 2020 году предложил компании чат-бота на его основе. Google зарубила проект из соображений безопасности – и Шазир ушел делать собственный стартап Character.AI. Чтобы вернуть специалиста, Google заплатила Character.AI 2,7 млрд долларов. Два года спустя Шазир снова уходит – теперь в OpenAI.

Джон Джампер – человек с другого фланга Google DeepMind. Именно он вместе с Хассабисом стал лауреатом Нобелевки за AlphaFold – ИИ-модель, которая смогла предсказать трехмерные структуры почти всех известных белков. Это одна из главных проблем биологии, ученые над ней бились больше полувека, AlphaFold управилась за месяцы, упростив стартовые этапы разработки лекарств (и не только их).

До ухода Джампер возглавлял создание новых версий AlphaFold (тут еще много более точной работы) и занимался другими научными ИИ. Теперь он переходит в Anthropic: на какую должность, пока неизвестно, сам Джампер написал, что сначала немного отдохнет.

Оба перехода ложатся в линию развития конкурентов. OpenAI сейчас в фазе активного найма, компания планирует почти удвоить команду – до 8 тысяч человек. Шазир возглавит разработку новых архитектур. Многие исследователи считают, что от создания пресловутого AGI нас отделяют 1-2 архитектурных прорыва – и Шазир отличный кандидат, чтобы их совершить.

Anthropic сейчас активно вкладывается в науку в партнерстве с Институтом Аллена и Медицинским институтом Говарда Хьюза. При этом у компании очень логичная лестница развития: сначала с помощью ИИ помогаем ученым анализировать уже известные данные, чтобы не пропустить что-то ценное. Далее идем в лабораторных агентов, когда ИИ помогает планировать эксперименты. И только после этого настанет время для крупных AI-assisted достижений в науке – и вот здесь компании может пригодиться Джампер.

Но есть еще пара моментов. OpenAI и Anthropic в ближайшее время выходят на IPO – это идеальное окно для перехода, когда можно получить опцион и хорошо после этого заработать. Плюс обе компании находятся на передовой ИИ-гонки: новостные ленты переполнены обсуждением Codex, Claude Code, новых версий GPT, Opus и Fable.

Что же Google? Компания отлично развивается за счет интеграции ИИ в текущие продукты – Android, поиск, Gmail, Docs и т. д. – но это ситуация, где на первом плане стоят старые разработки. А вот с ИИ-продуктами все хуже. Линейка Gemini отстает от Claude/GPT, Antigravity только сейчас собрали во что-то способное конкурировать с Claude Code/Codex, а про большинство громких анонсов с майского Google I/O все забыли буквально на следующий день.

Компания очень крута в “теоретическом ИИ”, у нее есть мощные наработки по моделям мира, ее специалисты выпускают множество научных статей, но при этом она отстает в “шиппинге” – выпуске классных продуктов для всех. Для исследователя же важно не только придумывать, но и создать что-то, чем пользуются все, что обсуждают, хвалят и критикуют. Здесь Google пока отстает.

Не отставать в освоении ИИ я помогаю на “Бусти”. Там уже 17 текстов, в которых я объясняю основы архитектуры ИИ, учу правильно промптить модели, разворачивать ИИ-агентов и вайб-кодить.

Самое время подписаться!