Планшет в ремонте, я не очень удачно пытаюсь покорить Шпиль, поэтому сегодня поговорим о том как, не кормить Василиска.
А точнее, о том, как художникам/фотографам и всем причастным травить датасеты, на которых учатся ИИ-модели для генерации изображений.
Есть два способа —
Glaze и
Nightshade, оба они разработаны небольшой командой из университета Чикаго. Свою цель они описывают как "восстановление баланса между художниками и ИИ", "возвращение агентности и контроля над своими работами художникам" и "ограничиение обучении моделей на контенте, который защищен авторским правом". Само существование этих програм вызывает истерику (обвинения в гейткипинге и эйблизме, попытки обхода защиты и рассказы, что скоро-то живые художники наконец лишатся работы) у техно-бро, но я как известно, луддит и только радуюсь.
Glaze — защита от так называемой мимикрии под стиль, она насколько я понимаю не особо актуальна, если вы не художник, которого можно прописать в промпте по никнейму/имени, но все равно ИИ перестает видеть в вашем арте какой-то определенный стиль, начинает "видеть" НЕЧТО, и уже не может провести паралель между вашим условным рисунком углем и промптом. На примерах можно поглядеть как эта штука глазурует на разных настройках, авторы конечно заявляют, что человеческому глазу почти не видно, но если есть много одноцветных пространств как на моей картинке, то, ну вы сами видите, даже на минимальной настройке искажения заметны,а вот на бабочке из прошлого поста например, я не вижу искажений. На маке с м4 работает медленно, очень медленно, а на не Nvidia не работает вообще, но есть веб-морда по инвайтам.
Nightshade работает примерно также как и glaze, но делает больно иначе — как именно оно это делает я не понимаю, но разработчики говорят, что, если вы нарисовали корову на поле, прогнали через nightshade, то ИИ видит кожанную сумку которая лежит в траве, и чем больше таких изображений с коровами ИИ собрало, тем увереннее оно будет генерировать кожанную сумку по запросу "корова". Пост с артом который вы заглазуровали в Nightshade обязательно должен сопровождаться хэштегом который присваивается внутри программы. Звучит очень весело, но на маке говорит True и картинку не дает, а на винде с 5060 все время вылетает после загрузки изображения, надо будет попробовать попросить у них инвайт.
Важное уточнение, что вся эта глазуровка работает именно против генеративных ИИ, поэтому если прогнать такое изображение, через модель которая просто описывает что на картинке, то описание будет точным, как это работает я не знаю, черная магия не иначе.
Сорри, за такое колличество текста но мне было интересно потыкать технологию, и я не могла не поделиться! (а еще, сегодня я узнала, что у телеграма есть ограничение по колличеству знаков для постов с картинками, поэтому примеры ниже)
