#opencode #minimax #glm

Сравнил glm-5.1 и minimax m2.7 на одной и той же задаче - одинаковый промтп, обе модели работали без внезапных разрывов соединения (что бывает очень часто с glm).
Задача была создать план доработок на основе уже готового примера в другом проекте.

Результаты:
- MiniMax-M2.7 · 2m 19s
- GLM-5.1 · 9m 5s

В итоге glm-5.1 в ходе своего анализа нашел документ с планом доработок, составленный с помощью minimax, и таки сделал свою версию плана 😁

Потом попросил обе модели сравнить их версию плана с другой, и обе сошлись на мнении, что версия от glm-5.1 оказалась более детализированной, кто бы мог подумать 🙂

Если есть выбор, какую из этих моделей использовать, то glm-5.1 чаще выдает более детальные ответы, но ключевой фактор - провайдер.

Если провайдер ZAI (который продает подписку на эту модель), то брать нельзя ни в коем случае - модель будет работать в 50% случаев (если повезет), сожрет все лимиты за пару дней, и будет отваливаться при достижении около 100к токенов в контексте.

minimax m2.7 первые 2 недели после покупки подписки работал хорошо, зато потом начал регулярно отваливаться (выдает ошибку сервера), и это официальный провайдер.

Примечательно, что когда отваливается m2.7, то можно некоторое время использовать предыдущую модель (m2.5), но потом сервер и для нее перестает работать - похоже, пользователи одинаково хитрые и переключаются с неработающей модели на работающую ... и роняют все разом 👍

Так что тренд у китайских моделей удручающий.