А давайте спросим об этом ChatGPT!
ChatGPT, даже обновленный до GPT-4, может преуспеть в отвечании на многие вопросы, но у него есть несколько ограничений, которые можно использовать для его определения.
- Вопросы про актуальные события: Поскольку обучение модели было завершено в сентябре 2021 года, она не знает о событиях, произошедших после этой даты. Если вы зададите вопрос о недавнем событии, человек сможет ответить на него, а AI - нет.
- Вопросы о субъективных чувствах или персональном опыте: GPT-4 не имеет собственных чувств или персонального опыта, и не может делиться реальными личными историями. Вопросы о персональном опыте могут помочь выявить использование AI.
- Вопросы, требующие продолжительного взаимодействия: GPT-4 не имеет способности помнить или отслеживать долгосрочные беседы. Если вы зададите вопросы, которые требуют последовательного ответа на ряд вопросов, AI может потерять контекст.
- Специфические вопросы, требующие особой экспертизы: GPT-4 имеет широкий, но поверхностный набор знаний. Если вопросы слишком специфические или требуют глубокой экспертизы, AI может дать неточный или упрощенный ответ.
Т.е. Цепочки вопросов вида "расскажите о своём прошлом опыте" -> "как вы использовали упомянутую технологию Х" -> "В контексте вашей ситуации почему вы сделали Y" не решаемы читером, диалог всё ещё является надёжным способом интревьюирования.