Я убрал из текста звёздочки, которыми размечают жирный шрифт. Ни одной буквы не тронул, проверил побайтово: 14 485 знаков до и столько же после.
Все шесть моделей, минуту назад звавших текст машинным, сказали «человек».
Это кусок моего исследования: 1882 текста, четыре независимых измерителя машинности, дизайн зарегистрирован до сбора данных. Препринт с DOI лежит на Zenodo.
Оценку тянет оформление. Заголовки, списки и выделения весят вдвое больше, чем язык и словарь вместе взятые. Уберите структурные признаки из расчёта, и знак эффекта перевернётся.
Модель способна выучить площадку вместо стиля. Один признак «откуда взят файл» ранжировал классы точнее, чем модель на 22 признаках стиля.
Строчка «пиши без штампов» в запросе роняет обнаружимость в 12 раз: 1,1% пропусков против 13,1%. Те же модели, те же темы, другая формулировка просьбы.
Хуже всего проверка работает на наших с вами SEO-текстах. В худшем разбиении почти каждый третий живой автор получил обвинение в машинном происхождении, и там же проверка прошляпила больше трети настоящих генераций — промахивается в обе стороны сразу.
Отсюда следствие для работы. «0% AI» в техзадании — требование ни о чём: показатель двигается от смены шаблона публикации, без участия автора. Проверять надо факты, источники и готовность автора отвечать за каждое утверждение в тексте.
Полный разбор со схемами, ограничениями и промптом для правки текста:
https://sk-seo.ru/blog/chto-izmeryayut-ai-detektory-issledovanie.html
Post #176
165
Forwarded from Кириченко SEO | ex-Staurus
- 👍 2