Как-то я читал книгу «Сильный искусственный интеллект» 2021 года. Там много внимания уделяли тому, что, несмотря на стремления специалистов создать сильный ИИ, все еще (на момент написания) нет единогласного определения, что такое сильный (или общий) ИИ (AGI). И нет четких и справедливых критериев проверки, является ли система AGI.
Год назад был пост о том, что OpenAI предложили называть общим искусственным интеллектом то, что принесет им прибыль 100 млрд долларов в год. Звучит как-то странно, но ладно.
И вот недавно исследователи предложили свои критерии. Во-первых, дают определение, что
AGI — это ИИ, который может сравниться или превзойти когнитивную универсальность (широту) и глубину знаний хорошо образованного взрослого человека.
Чтобы это измерить, в психологии существует 10 когнитивных способностей человека, среди которых:
- фактические знания
- понимание и написание текста
- способность решать новые задачи и делать выводы
- удержание информации в памяти
- скорость обработки информации
- творческие способности
И вот для оценки по таким критериям модель проверяют на тестах. И получилось, что GPT-5 в среднем 58% от AGI.
Можем ли мы полагаться на такие метрики?
Да, критерии интеллекта человека вполне справедливые. Но даже если модель пройдет эти тесты, можно ли назвать это AGI? Момент спорный, на мой взгляд. Что мешает обучить 10 моделей на каждую когнитивную способность и использовать их в одной системе для прохождения теста на 100%. И что, мы скажем, что система умнее любого человека? Сомнительно.
Есть мнение, что ИИ через LLM уже практически достиг своего потенциала. И, как сказал Андрей Карпаты в своем интервью, AGI будет создан не раньше, чем через десятки лет.