Митап «Роль QA в эпоху ИИ» (как пошутил мой знакомый, «эпоха ИИ» звучит как название исторического периода в Японии).

Прошлая неделя в Уфе выдалась насыщенной на ИИ-события: мы провели хакатон по персональным агентам и митап, где 44 человека в мини-группах обсуждали трансформацию QA.

🗯 Что обсуждали на митапе

Мы искали ответы на четыре главных вопроса в контексте агентизации:

1⃣ Как в идеальном сетапе должна измениться роль QA?
2⃣ Как должны поменяться другие роли?
3⃣ Какие сейчас существуют блокеры?
4⃣ Что нужно начать делать уже сейчас, чтобы прийти к целевому сетапу?

Краткая сводка по опросу — в заголовке поста (на картинке), а подробные выводы из презентации я оставил в комментариях.

🎚 Уровни внедрения ИИ

Для себя я с легкой руки делю Adoption на четыре стадии:
• LVL 1. Общение с LLM в чате.
• LVL 2. Написание кода с одним агентом.
• LVL 3. Использование нескольких агентов с разными скиллами.
• LVL 4. Оркестрация агентских систем.

🐰 Суровая реальность и инсайты

Митап оказался отрезвляющим. Реальный уровень внедрения ИИ пока довольно низкий:

• Подавляющее большинство (90%) застряло на LVL 1, используя нейросети как обычный чат, даже дома для пет-проектов.
• Фразы уровня «для QA нужна специально обученная LLM» отлично показывают, что с агентами и скиллами пока почти никто не работает.
• Моделями Anthropic и OpenAI в работе пользуются только 20% участников, а платные китайские сетки применяют от силы 5%.
• Доступ по API и использование продвинутых платных моделей — это пока удел стартапов, где разработчикам дают больше свободы.
• К локальным LLM много недоверия из-за сложностей с развертыванием в РФ (дефицит нужного железа и качественных открытых моделей).
• В крупной нефтянке и около-госсекторе внедряют модели, одобренные ФСБ, но они показывают плохие результаты и лишь множат скепсис.


Было очень интересно. Работы впереди много — надо продолжать!