SOTA — State of the Art. Так называют передовые модели в среде исследователей искусственного интеллекта. Сегодня такие модели, как GPT-4.5, o3, DeepSeek-R1-Zero, создаются в ведущих лабораториях США и Китая. И всё чаще они воспринимаются как произведения искусства. Подлинные чудеса научной и инженерной мысли — State of the Art. Я смотрю на эту эволюцию сквозь базовый для себя принцип — модели мира.
На ранних этапах развития ИИ, зарождающиеся модели мира были схожи с наскальной живописью — грубые, фрагментарные, отражающие лишь поверхностное представление о реальности. Так, например, в обучающихся системах (AlphaZero) модель шахматной доски сама возникает в процессе обучения, на основе опыта, становясь точнее с каждой партией. Но в простой среде может зародиться только простая модель.
Сегодня же мы вступаем в эпоху Возрождения: реализм, перспектива, гуманизм, техническая изощрённость и эмоциональная выразительность зарождаются в моделях мира ИИ. Их авторы, исследователи в тех самых ведущих лабораториях лишь отчасти представляют, что они строят, когда выгружают в модели все знания человечества. Они именно исследуют потенциал и возможности своих творений.
Любопытно, что одной из отправных точек этого перехода от инженерии к исследованию стала именно эмоциональная выразительность. Ещё в далёком 2019 году, в ранней модели GPT-2, исследователи обнаружили "нейрон", чувствительный к эмоциональному окрасу текста. Это была одна из первых эмпирических зацепок: внутри нейросети возникают измерения, отражающие человеческие категории — настроение, тон, стиль. Можно сказать, что именно такие "новые измерения" стали аргументом в пользу гипотезы масштабирования: чем больше модель, тем богаче и многомернее её внутренний мир.
За пять лет исследователи преодолели путь от наскальной живописи и технологий каменного века до эпохи Ренессанса. В этом году уже вышло несколько передовых моделей и еще несколько релизов состоится в скором времени. Я уже писал про непредсказуемое поведение ИИ — это и один из признаков некоторых фундаментальных SOTA моделей. Как правило, никто достоверно не знает и не представляет, чего от них ожидать. Но об этом позже...
Еще, я сделал картинку к этому посту за 5 минут. Мысленно вернитесь на 5 лет назад. Вас уже такое не впечатляет? На какие мысли это вас наталкивает? При чем тут модель мира? Жду ваших комментариев.
Post #54
651
- 🔥 5