Всем привет!

Свой первый пост на данном канале я хочу посвятить базовому понятию ИИ и общей концепции тестирования ИИ.

Начну с того, что Искусственный интеллект (ИИ) — это технология, которая позволяет машинам выполнять задачи, требующие так назвываемого “человеческого" мышления, например, распознавать изображения, понимать речь, принимать решения, генерировать тексты и многое другое.

Такие системы называют недетерминированными, потому что при одних и тех же тестовых данных, ИИ может выдавать вам разные ответы (если мы говорим с вами о генеративном ИИ или нейронных сетях, а не о более простых методах машинного обучения). Отсюда и сложность в тестировании, а именно, как проверить работу системы, если нет четко заданного ожидаемого результата.

Для этого есть ряд оценок или метрик, которые могут говорить о качестве работы ИИ, такие как

- Релеватность ответа
- Верность ответа (отсутствие галлюцинаций)
- Релеватность контекста и многое другое.

В дальнейшем я на данном канале я буду стараться разбирать особенности каждой метрики и в целом подходы к оценке ИИ, потому что это достаточно объемные темы, а пока..

… подписывайтесь на канал и я буду стараться постепенно погружать и рассказывать вам о мире тестирования ИИ.⚡️