Артефакты нейромузыки и причем тут математика

Вчера в комментариях задали вопрос про водяные знаки нейромузыки.

1. В нейромузыке от Suno есть, выражаясь их терминологией «неслышимые водяные знаки». Оказывается, они добавили их ещё в версии 3.

Как их определять, думаю, знают только в Suno. По крайней мере, мне не попадались статьи, в которых объяснялись бы методы их определения.

2. Даже если Suno, или любой другой сервис для создания нейромузыки, уберёт все водяные знаки, это не значит, что такую музыку станет невозможно определить. Детекторы могут использовать и другие признаки, поскольку необработанная сгенерированная музыка имеет особенности, связанные с архитектурой используемой нейросети.

3. Эти отличительные признаки были объяснены математически и доказаны в статье исследователями Deezer.

Если совсем кратко, то некоторые современные генераторы музыки оставляют характерные периодические артефакты (checkerboard artifacts), которые могут проявляться как дополнительные пики в спектре. Если вам тяжело читать математические объяснения, то есть видео с конференции.

4. В дополнение к статье выше, Deezer опубликовали PoC детектора нейромузыки. Отчасти, моя реализация вдохновлена этим концептом.

Мой подход получился проще и более общим. Я не ищу целенаправленно пики в спектре, а анализирую более широкий набор признаков спектра. Вероятно, поэтому точность моего классификатора немного ниже.

С другой стороны, такой подход потенциально позволяет учитывать не только периодические артефакты, описанные Deezer, но и другие статические особенности спектра музыки.