Что такое Chatbot Arena

В мире AI все меняется очень стремительно. Сегодня доминирует одна модель - завтра другая. И довольно сложно самостоятельно уследить за всем. Для этого есть специальный ресурс - Chatbot Arena.

Работает он по следующему принципу. Модели тестируют на случайных запросах пользователя. Место в рейтинге определяется путем “поединков” моделей друг с другом. Принцип довольно простой: две модельки под маской анонимности дают пользователям ответы на вопросы, а пользователь выбирает лучший, на свой взгляд.

После этого используется система ELO (она же используется в шахматах) и по ней определяются модели с лидирующими позициями.

Текущий рейтинг можно посмотреть тут.

И хотя в последнее время многие говорят о том, что модели специально тренируются специально чтобы победить на арене, окончательный выбор все равно за человеком, да и, к тому же, все модели из топа действительно находятся там по праву. А 1, 2 или 3 место - это не важно. Используйте каждую для своих задач и решите для себя сами. Что именно нравится вам. Лично мой фаворит - Gemini, которая, кстати, сейчас на первом месте 🙂