ControlNet уже пару недель главная новость в поле StableDiffusion

А я только сейчас показываю пример с ним в своём рабочем процессе. Зато реальное применение, кек.

Пробовать тут (переведено на русский):
https://colab.research.google.com/github/tg-bomze/collection-of-notebooks/blob/master/AI_Interior_Designer.ipynb#scrollTo=niAjODJhEUDg

Что может: выдать варианты одного и того же интерьера в разных стилях.

Принцип работы: загружаете картинку-референс, указываете, какую информацию из неё извлекать - карту глубин, сегментацию, контуры или всё вместе. Выбираем один из преднастроенных стилей (их тут штук 30) или расписываем промптом свой авторский. Генерим.

Что не так: сами картинки. Только квадраты, качество скачет от приличного до dalle-подобных шумных уродцев. Я пробовал одинаковые стили на разных рефах и это чистый рандом. Идея огонь, но требуется допилить.

Что так: полезно для творческого полёта в начале работы. Расширяет воображение.

В примерах опорная картинка и варианты.

#googlecolab
#controlnet