Поймать ИИ на ошибке: как мы устроили эксперимент с видео
Erfahrungsaustausch

Сегодня в рубрику Erfahrungsaustausch с прекрасной идеей для урока к нам заглянула дорогая коллега Настя Шестопал, автор душевного канала Nastjas Werkzeugkiste | Немецкий и методика и модератор разговорного клуба для преподавателей немецкого Sprachclub mit Nastja & Basti.

Из студенческого разговорного клуба она принесла нам такой кейс.

Мы обсуждали, как ИИ меняет рынок труда, и устроили небольшой эксперимент.

Что делали на занятии:
- обсуждали видеорепортаж, как ИИ может поменять и уже меняет рынок труда;
- дали ChatGPT ссылку на наш YouTube-репортаж и попросили сделать выжимку;
- сравнили с оригиналом и попытались найти расхождения.

Что заметили студенты:
- текст гладкий и связный;
- отсутствует центральный пример (весь сюжет выстроен вокруг конкретного медцентра);
- некоторые тезисы неполные или противоречат информации из видео.

В чём же дело?
Я рассказала, что у ChatGPT нет прямого доступа к видео, только к субтитрам (если они есть). В этой ветке он меня не предупредил, а выдал «рандомный» текст на тему.
Студенты возмутились: «Так ты даже не смотрел видео?!». Спросили у чата, как надо было поступить правильно. ChatGPT честно ответил: «Сообщить об ограничении и предложить альтернативу (например, статьи)». Но по факту не сделал этого.

Итог эксперимента: мы пришли к единогласному решению - проверять и перепроверять!

Может, у вас были какие-то свои кейсы работы с галлюцинациями ИИ?
Делитесь в комментариях!

#Erfahrungsaustausch