Проверку заимствований в тексте автоматизировали двадцать лет назад. Список литературы всё это время оставался вне контроля: его сверяли вручную, по каждой записи, и только если проверяющему хватало на это времени.
Что там находят, когда всё-таки проверяют, специалисты РГБ описали ещё в 2020 году по итогам анализа массива научных работ: фиктивные источники, подмена первоисточника вторичным документом, чужие ошибки, переписанные из статьи в статью. С нейросетями стало хуже — они сочиняют несуществующие статьи с реальными фамилиями и корректно выглядящим DOI, и такая ссылка на глаз неотличима от настоящей.
Коллеги из Руконтекст – системы проверки на заимствования и ИИ-генерацию попросили поделиться: они этот этап автоматизировали. Каждая ссылка в списке литературы сверяется по восьми признакам – DOI, год, том, выпуск, страницы, название, журнал, авторы и получает статус: подтверждена, требует подтверждения, недействительна. Красную пометку получает только запись, в фиктивности которой система уверена; спорные случаи уходят человеку. Источники без DOI – сайты, нормативные акты проверяет отдельный поисковый механизм по открытым источникам.
Подробнее в сообщении на сайте Российской библиотечной ассоциации.
Заимствования научились ловить, когда их писали люди. До списка литературы дошли, когда его начали писать нейросети.