1) «ты дурак, надо использовать не 4o, а o3, о1, claude, grok, gemini, qwen,
2) «ты дурак, надо писать по-английски, это вообще всё меняет»
Штош — я терпеливо проверил на английском языке:
- ChatGPT 4o
- ChatGPT o3-mini-high
- ChatGPT o3-mini-high с включенным поиском
- ChatGPT o1
- Grok 3
- Gemini 2.5 pro
- Claude 3.7
- Claude 3.7 с extended thinking
- DeepSeek
- DeepSeek с DeepThink
- Qwen-2.5Max
- Qwen-2.5Max с thinking
Скриншоты прикрепляю тут и в комментах, что не поместилось в пост. Все модели ведут в выдуманную переменную окружения, по-разному её называя.
Успехов человеку, не обладающему опытом (ИИ же всех заменил), в этом копаться 😍
1. Ещё раз повторю свой тезис из видео:
LLM это множитель вашего скилла.
Умножение нуля даёт ноль. Как помощник, как второе мнение, как инструмент — отлично. Действительно отлично. Действительно может быть полезно, когда сам шаришь. Действительно можно найти сферы применения. Но все эти «ИИ заменит программистов» — да не смешите мои тапки.
2. ИИ не повлияет на разработку? Повлияет, конечно, уже влияет. Но не внезапно сделав программистов ненужными. Просто ещё один инструмент, не более того.
3. ИИ не заменит джунов, как тоже многие пишут в комментах, в духе «мы уволили джунов и все задачи решают сеньоры, активно используя ИИ». Из мамки сразу будут вылезать сеньоры, ага.
4. В этом эксперименте выделил бы Grok и Claude. Дали ответы лучше, чем ChatGPT, DeepSeek и Gemini. Всегда ли, для всех задач они дают ответы лучше? Не думаю. Сохранится ли это преимущество со временем? Не знаю. Что лучше использовать для вашей конкретной задачи? Не знаю. И никто не знает.
5. Но знаю, что реально лучше всего качать и использовать — свой собственный скилл.
6. Уверен, что развитие LLM, которое мы сейчас наблюдаем, приведёт к дальнейшей деградации уровня разработчиков, дальнейшей деградации безопасности систем и дальнейшей деградации общего качества проектов. Вайб-кодинг сладок и подсадит на свою иглу многих. Впрочем, это только ещё сильнее поднимет ценность специалистов, обладающих серьёзным личным скиллом — см. п. 5. Ценность мартышкиного труда вайб-кодеров минимальна. Раньше было определение скрипт-кидди, теперь вот вайб-кодер. Успехов товарищам.