Performance artist

Тот момент, когда непомерная разговорчивость персонажей из Хайлуо – в тему.

Имеем в Vidu

Попробовал затестить для около-рабочих задач ещё одну китайскую нейронку для видео.

Кратко:
почти ничего не дают попробовать забесплатно. В не-реализме может конкурировать с Люмой, с реализмом выходит хуже Хайлуо и Ранвея.

Плюсы:
• прекрасно понимает промпт. Любит детальные описания из Клода/ГПТ, старается им следовать и попадать в атмосферу. Чувствуется, что добавили много описательных прилагательных при разметке;
• хорошая физика персов в анимации для не-реализма. И у них более разнообразные движения;
• есть подробный гайд с промптами тут (привет Хайлуо, снова китайский аналог ГуглДокс);
• неплохо справляется с крупным текстом, мелкий плывёт;
• три референсные картинки, из которых Vidu попытается собрать новое содержание по вашему промпту. Идея прикольная, но требует тщательного подбора рефов похожей стилистики и качественной картинки – иначе получится, как у меня в примере. Хочется вдумчиво тестить, но не дают – об этом ниже.

Минусы:
• бесплатно получится прогнать один шот в 720p или 20 быстрых шотов малого разрешения. Без апскейла быстрые шоты страшны, с апскейлом их будет всего 10. Такие условия или для опытных, с отработанным тестовым пайплайном, или для тех, кому не жаль 30$;
• движение камеры понимает хуже Хайлуо и Люмы. В детальных промптах с описанием атмосферы слушается ещё хуже;
• нельзя отключить prompt enhancer. Совсем. Даже за деньги;
• нельзя поставить только последний кадр – привет Клингу. Да что с ними всеми не так?!
• движение персов в кадре
сопровождается серьёзными артефактами на фоне. Часто по этой причине шот неюзабельный. Апскейл иногда решает проблему, но может пострадать персонаж. Видно в примерах.

Итог:
прикольно, сыро, дорого и недружелюбно.
Если допилят качество с анимацией большого формата, можно частично перейти сюда из Люмы.

Пробовать тут.

Hailuo/Minimax гайд по промпту

Очень подробный, с примерами. Эти китайцы первые догадались, что можно показать ВИДЕО, как их нейронка работает с разной длиной промпта и последовательностью описания сцены. Модные и дорогие Ранвей с Люмой кидают в тебя текстовым описанием движений камеры – плати и сам разбирайся.
А тут забота. Лайк.

ВНЕЗАПНО настройки камеры идут третьими в иерархии.

Смотреть тут (какой-то китайский аналог ГуглДокс).

Первая азиатская выставка Рефика Анадола в галерее Futura Seoul

Refik Anadol это турецко-американский AI-художник, который давно работает с генеративным артом.
Вы могли про него слышать весной 2024 года, когда он впервые в истории продал интеллектуальные права на восемь AI-видео инсталляций за 5 млн. баксов.

Очень любит работать с гигантскими экранами и объёмами данных. Дружит со всеми компаниями, кто занимается генеративным AI. Ранее дичайше котировал опенсорс, сейчас заматерел и пилит в студии свои закрытые системы.

Выставка дорогая, масштабная, грамотно собранная. Под объяснение сути проектов для тех, кто понимает за генерацию, сбор датасетов и т.д. выделили зал, где я залип минут на 15. Для обычных зрителей – два зала, где можно валяться в креслах-мешках под сгенеренную музыку и смотреть на генки.

Я собрал длинный ролик по всей выставке в большом разрешении. Снимал людей и свои ноги, чтобы вам были понятны масштабы экранов.

Наша Strange Magic studio снова берёт золото в открытом жюри на фестивале нового дизайна Среда – за оформление лучшего фестиваля дизайна на Дальнем Востоке.

Когда посудил 1240 работ на фестивале

Закончил со Средой. Две недели я рисовал для себя примерную картину отечественного дизайна.

Половина работ – проходные или калька старых/ранее успешных на фестивале кейсов.
Треть – трэш.
Интересных – 10%.
Крутых – 2%.

Опыт тяжёлый и травмирующий, позволяет терять веру в людей, креатив и перспективы индустрии. Повторять – не чаще раза в три года.

Несколько примеров для поста выше.

Пробовать тут:
https://hailuoai.video/

Сайт на английском.

Пишу про Hailuo AI (он же Minimax)

Кратко:
лучшая генерилка для видео. Но с большими нюансами, которые мешают получать стабильный результат. Подходит не всем. Очень дорого для постоянной работы.

Тестировал с референсным кадром.

Нюансы:
очень, ОЧЕНЬ любит движение и говорящих персов. Если в исходном кадре появляется что-то, что определится как персонаж, почти наверняка он будет двигать телом/лицом. Получить неподвижную камеру так же сложно. Тренировали на всяком движняке и говорении.

Добавили LLM-ку для правки промпта (и видимо перевода на китайский) – значок On/Off. В режиме Off камера перестаёт слушаться промпта и делает что-то своё. В режиме On работает, как раньше без LLM-ки, когда ты переводишь на китайский вручную через Гугл. Возможно поправят.

Намного чаще стали перелёты между стилями, даже при их жёстком прописывании. Реализм и диджитал арт меняются на дешёвое 3D с движением.

Цена:
10 баксов в месяц за 33 генерации, 95 баксов за безлимит. При выше написанных нюансах, брать что-то кроме безлимита не имеет смысла, потому что вы проиграете.
Тест нового аккаунта = безлимит на 3 дня, но там очереди по 5к человек и ожидание до часа. Я за всё время сгенерил 27 роликов.

Резюме:
если генерите много реализма с движением, то Minimax это лучшее, что вы можете сейчас купить.

Любование инопланетными хризантемами в Ботаническом саду ДВО РАН. Смотреть со звуком для полного эффекта.

Фото + Minimax + Suno + CupCut

Напишу про Hailuo AI (он же MiniMax), как только пройдёт вот эта волна хайпа.
Или когда введут наконец платную подписку.

Сейчас в МиниМаксе сделали долгожданную генерацию по первому кадру – поэтому такие очереди. Надеюсь, эти китайцы не пойдут по пути Клинга, как я опасался в этом посте.

Upd: теперь ещё и ошибку выдаёт, когда пытаюсь с первым кадром генерить -____-

Совсем скоро я буду судить дизайны в Открытом жюри фестиваля «Среда». Вот и фотку мою пафосно оформили и на сайт повесили.

В этом году наша студия подаёт две работы: дизайн для упаковок готовой еды и фирменный стиль фестиваля Vladivostok Design Week 2024 (после которого я отсыпался с понедельника по среду).

Как только мы в самый последний момент оформим заявки, закину ссылки сюда вам посмотреть – всё как в прошлом году.

Фотоотчёт с открытия выставки

Было много молодёжи, которая хочет разбираться и узнавать новое. Это радует. И было много взрослых людей, которые решительно не понимали, что происходит и зачем на плакаты смотреть. Это печалит.

Провели вернисаж, наговорился до боли в связках. Завтра мини-лекция про то, как 7 месяцев мы делали выставку и разбирались в азиатском дизайне.