Может ли ИИ найти литературу за вас

Недавно мы говорили о том, что искусственный интеллект усредняет, а наука идёт на предел. Сегодня на примере поиска литературы рассмотрим, где ИИ помогает исследователю, а где подводит.

Группа авторов из Ирландии и Шотландии (Faherty и соавт., 2026, BMC Medical Research Methodology) провела эксперимент. Для обзорной статьи по делирию нужно было найти все опубликованные клинические рекомендации. Авторы провели поиск двумя путями параллельно: 1) обычный систематический поиск по библиографическим базам и 2) запрос к четырём большим языковым моделям (ChatGPT, Gemini, Claude и Grok) со структурированными промптами. А затем сравнили результаты по полноте, точности и скорости.

Систематический поиск нашёл 45 рекомендаций. Языковые модели вместе отыскали лишь 17 из них. Чувствительность отдельных моделей составила от 9% до 29%: даже лучшая из них находила меньше трети того, что даёт полноценный поиск.

Но есть и обратная сторона. Точность моделей оказалась высокой – от 22% до 60%, тогда как у систематического поиска она всего 1,7%. Это не парадокс: систематический поиск намеренно выгребает тысячи записей, среди которых нужные единицы, поэтому его точность низкая, зато полнота максимальная. Модель возвращает мало результатов, но чаще по делу. К тому же модели нашли две рекомендации, которых обычный поиск не дал вовсе, и справились в разы быстрее.

Таким образом, для доказательного синтеза литературных данных, где цена пропуска высока, языковые модели пока не могут заменить систематический поиск – они теряют большую часть источников. Но как дополнение они полезны: быстры и иногда находят то, что упустил основной поиск.

Практический смысл для нас тот же, о котором мы говорили в прошлый раз. ИИ – инструмент, ускоряющий рутину, но не замена методу и не замена вашей ответственности за полноту работы. Поручите ему черновой проход – и обязательно перепроверьте систематическим поиском. В обзоре, пропустившем две трети рекомендаций, виноват будет не искусственный интеллект, а исследователь.

← Искусственный интеллект