Молния! Igeogram 4 опенсорснулся!
По бенчам и аренам теперь это лучший опенсорсный генератор картинок.
"Ideogram 4 — это первая модель с открытыми весами от Ideogram. Это базовая модель, обученная с нуля, а не файнтюн существующей модели. Она имеет новый структурированный интерфейс промптов в формате JSON, лучшую в своем классе многоязычную отрисовку текста, глубокое понимание языка, явное управление цветовой палитрой, а также нативное 2K. Аспекты картинок до 6:1"
Всего 9.3B параметров - должно влезать в слабые видеокарты (Qwen-Image - 20B, FLUX.2 [dev] - 32B)
Две версии весов nf4(Cuda) и fp8. Обещают больше квантизаций.
Для гиков:
It is a flow-matching text-to-image model built on a fully single-stream Diffusion Transformer (DiT) architecture.
Fully single-stream DiT. Text and image tokens are concatenated into one unified sequence and processed through the same 34-layer transformer, with no separate text or image branches.
Vision-language model as text encoder. Instead of a text-only encoder like CLIP or T5, Ideogram 4 uses Qwen3-VL-8B-Instruct, a full vision-language model that provides far richer understanding of visual concepts.
Тренировали на JSON разметке, есть промпт улучшайзер и промпт гайд.
Есть какие-то заморочки с цензурой (использование https://thehive.ai/), но думаю народ сейчас быстро выкусит нужный код, если это вообще нужно.
Лицензия - некомерческая. Какая именно, надо разбирацца.
Очень круто сделан гитхаб - все веса, код, инструкции, гайды - по ссылке:
https://github.com/ideogram-oss/ideogram4
Завтра будем разбираться с анатомией, цензурой, текстом, слоями и пр.
Нелокально можно пробовать как у них на сайте, так и на всех аггрегаторах: фал, креа, комфиАПИ, рунваре, магнифик, репликейт..
Всем бессонной ночи!
P.S. Editable text, movable layers, and full image editing are coming soon.
@cgevent
Post #15833
10.1K
- 🔥 84
- ❤ 18
- 👎 4
- 😁 4
- 😱 1