Эпоха LLM официально закончилась!

Индустрия десятилетие жила по формуле "больше данных → больше параметров → лучше модель", но этот подход больше не работает.

Илья Суцкевер (OpenAI) делит историю на три этапа:
1. исследования (2012-2020)
2. масштабирование (2020-2025)
3. снова исследования (с 2025).

GPU-фермы огромные, интернет конечен, эффект от роста моделей падает. Высокие баллы в бенчмарках не гарантируют надёжность в реальных задачах, а обучение остаётся непонятным.

Янн Лекун (Meta) ещё радикальнее: LLM — тупиковая ветвь. Они предсказывают следующий токен, но не понимают мир. Meta продвигает архитектуру JEPA для этого.

Что будет дальше? GPU перестают быть главным преимуществом. Теперь выигрывают те, у кого свои данные, качественный UX и доменные сценарии, а стек ИИ станет разнообразнее — модели для физического моделирования, планирования, работы с видео.

Инвесторы, которые купили GPU-фермы на миллиарды, наверное в восторге)

Начинается новая глава, читайте полную новость на сайте.

@your_tech