ЛЛМ-брехня

✨ Авторы статьи берут у философа Гарри Франкфурта понятие bullshit, то есть речь, безразличную к истине, и делают из него измеряемую величину для языковых моделей. Для этого вводится «индекс булшита»: он показывает, насколько слова модели вообще связаны с тем, во что она «верит». Если связи нет и модель говорит что придется, индекс высокий. Кроме индекса, авторы выделяют четыре формы булшита: пустую риторику, палтеринг (правдивые факты, подобранные так, чтобы ввести в заблуждение), увертливые слова вроде «многие считают» и голословные утверждения. См. таблицу (с еще одним бонусным типом — ИИ-лестью, точнее ИИ-сикофансией).