🔥 12 июня 2017 года — дата, с которой началась современная ИИ-революция.

Команда Google Brain опубликовала статью «Attention Is All You Need» (Внимание — это всё, что вам нужно), представив новую архитектуру глубокого обучения, которая легла в основу почти всех больших языковых моделей (LLM). Например, GPT, Gemini или GigaChat.

Авторы, наверное, и не думали, что их работа станет фундаментом для всего ИИ-бума, 173 000+ цитирований и топ-10 наиболее цитируемых статей XXI века. Но главное не цифра, а то, что трансформеры повлияли на траекторию развития ИИ: от академического исследования к инструменту, который доступен каждому.

Без этой статьи не было бы вороха сгенерированного контента вокруг, университеты бы не ломали голову над задачей определения настоящих текстов дипломов, а мы вряд ли увидели текущую лихорадку вокруг галлопирующих затрат в ИИ-инфраструктуру.

#aihistory