CGIT_Vines

Bytedance с новой моделью X-UniMotion хвастаются, что победили галлюцинирующие руки, но, кажется, забыли про ноги.

Эти живут своей жизнью, проворачиваясь и исчезая в те моменты, когда они так нужны. В целом, моушен конечностей довольно консистентный.

Мимика тоже копируется на отлично, но только при очень качественном референсе. Просадки довольно сильные, когда нужно добиться упрощения для анимационных персонажей.

На входных данных используется статика анимируемого персонажа и видеореф на моушен.

Тут более подробно

Показали демку Mirage, и это довольно интересная демка, отличающаяся от предыдущих нейро-движков тем, что вы можете менять окружение через текстовый запрос. То есть text2UGC, только это не совсем User, т.к. контент генерирует ИИ.

Еще одно преимущество — это сессии, которые могут длиться 10 и более минут, что было невозможно на прошлых поколениях, которые разваливались в течение десятка секунд. Правда, я заметил одну забавную особенность: симуляции всё равно внезапно сбоят, выдавая какую-то рандомную сгенерированную тётку рядом с тачкой — на манер NFS. 🤡

Попробовать демки, Форзы и ГТА тут

Runway сделал очень интересный проект, который, конечно, копирует идеи ранних текстовых RPG и даже генеративных текстовых RPG, которые выходили пару лет назад, но добавляет к этому генеративные картинки прямо по ходу вашего сюжета. Сюжет и начальные параметры мира вы можете задать на старте — и отправляться в путь.

Это очень похоже на момент (не знаю, заметили ли вы это или нет), когда выходило и продолжает выходить огромное количество ноунеймных видеогенераторов или генераторов картинок, которые на следующий же день все забудут. Но вдруг выходит Veo 3 с голосом — и происходит качественный скачок именно в опыте, не в качестве.

С играми будет та же история. Сейчас мы получаем интерактивную книгу с картинками, потом к этому добавятся звук, видео, управление и т.д.

Интересный кейс: чувак задал начальный сетап мира, где он — голливудский режиссер, снимающий малобюджетный хоррор. По сути получилась симуляция съёмок этого фильма.

Ссылки на игры, сгенерированные другими, сохраняются — т.е. можно перепройти. Только вряд ли сохраняется сюжет, так как вы его меняете прямо на ходу.

Играть можно только при наличии партнёрской программы.
Вот линк на чей-то сюжет.

Просто чтобы не забывать, где мы были 2 года назад.

Фильм, сделанный по одному и тому же сценарию, шот в шот, только с промежутком в 2 года и терабайтами обучающих данных.

В фильме для изображений использовали: Runway, Midjourney, Kontext.
Для видео: Kling, Hailou, Higgsfield, MJ Video.
Для липсинга: PixVerse, Hedra.

Автор — Uncanny Harry.

@CGIT_Vines

Увеличение количества треугольников 15 лет назад выдавало гораздо более точный результат. Сейчас увеличение даже в 10 раз вряд ли даст такой же прирост в качестве.

Кажется, трёхмерные генераторы уже довольно близки к вершине поликаунта, и нет смысла его увеличивать — для этого всё равно никакие софты не готовы, если вдруг возникнет потребность как-либо работать с геометрией или текстурами.

Следующий логичный шаг повышения точности — это сегментация и повышение поликаунта отдельных кусков до буквально миллиона или пары миллионов трисов, а дальше — внутренняя ретопология с сохранением важных деталей.

Новость дня!
Рокстары смоделировали отпечатки пальцев на тачскрине в GTA6 🤡
6000 человек сочли это невероятным!

А вот это просто отвал жопы! 🤯 Google показал генеративную ОС!
Каждый раз, когда вы совершаете действие — происходит генерация UI и его наполнения. Просто посмотрите видео — будет понятнее.
И всё это только лишь на Gemini 2.5 Flash-Light.

Заходя в размышления о генеративном всём — всём, с чем мы взаимодействуем в вычислительных системах — органично на ум приходит процесс, когда генерируется не только приложение, а в целом процесс.
Как в демках с играми: каждый следующий шаг генерируется на основе предыдущего. Так же и у Гугла — в их экспериментальной ОС.
Нажимая на Notes, система создаёт её с нуля.

Вы спросите: нахрена? Резонный вопрос, если работает пусть существует в виде приложения. Это больше демонстрация и смещение возможностей проектирования.
Не все на свете приложения уже существуют. Мы сейчас уже сами пишем недостающий функционал в виде скриптов — потому что это стало достаточно просто и одновременно увлекательно.

Так что — начинаем думать по-новому!

@CGIT_Vines

Для тех, кто искал решение для генерации 3D и текстур, есть решение на базе ComfyUI с интеграцией Hunyuan 2.1.

Оно, в целом, не новое, но вдруг кто не знал.

Git присутствует, для желающих выжечь свое время. Я, к сожалению, в ближайшие пару месяцев не смогу уделять достаточное время подобным тестам, так что делитесь в личку и в комментах.

Rodin добавил бридж пока в только в Blender, но сразу же пообещал поддержать и других: Unity, Unreal, Omniverse, Cocos, Godot.

С подпиской получите доступ к библиотеке моделей которые генерируют другие, пользователи, у которых из-за подписки, нет возможности поставить приватную генерацию.

Хорошая бизнесс модель, вчера как раз с Ксенией говорили об этом.

Мы с Ксенией договорились провести стрим сегодня в 19:30 по МСК, на счёт генеративных инструментов для создания 3D в продакшене.

Ксения — автор вот этого поста, где всю локацию она собрала на генерации в Hunyuan

Поговорим о пайплайнах, о сильных и слабых местах при таком подходе, о роли художника в этом процессе и о том, как не потерять, а даже развить себя в тот момент, когда ИИ всё больше рутинных задач забирает на себя.

Линк на YT

Я только-только с премьеры 28 Years Later.

Не бойтесь, спойлеров не будет. Ну, кроме одного — в конце.

Всё ещё под впечатлением. Возможно, кого-то предостерегу от выдуманных ожиданий: просто не ждите ничего.
Тем более — не ждите повторения того, что он уже снял. Мы все выросли с тех пор, как вышел 28 Дней Спустя, и не стоит бить свой же рекорд в той же самой категории.

Бойл остался таким же ебанутым (в хорошем смысле) — и в плане монтажа, и в плане управления эмоциями с экрана.
Не переживайте, будет и масакр, и кровища, и погони, и выживание. Но также найдётся место трагедии, и даже поржёте пару раз — всё уместно.

Отвернулся от экрана я только один раз. И это не было связано со смертью кого бы то ни было или с жестокостью.
Что забавно, подумал я :)
Идеи и неожиданные решения — как обернуть контент и подать его зрителю или игроку — это пока всё ещё человеческая сверхспособность.
ИИ, уверен, ещё очень далеко от этого. Но не невозможно: мы всё же химические существа, и нас можно рассчитать алгоритмически. Как минимум — с точки зрения эмоций.

А вот и спойлер.
В фильме вы увидите довольно много хуёв. Просто знайте — они все не настоящие.

Хорошего просмотра!

На конференции случайно засняли результат употребления Джоном Кармаком большего количества белка. И как следствие превращение его в думгая.

Lovis Odin — interactive designer и в прошлом студент школы Gobelins — собрал для вас автоматическую сборку на базе ИИ.

Забираете репозиторий, кладёте набор ваших клипов в папку Clips, и дальше, как написано, — ждёте магию с использованием LLM и Flux в ComfyUI.
Пайплайн анализирует ваши клипы на предмет содержания, цвета и движения, а затем использует различные творческие «настройки» для создания уникальных видео.

Монтаж можно запускать с использованием предустановленных стилей:

PULSATING_ENERGY: Создаёт энергичную, ритмичную композицию.
CHROMATIC_DREAM: Акцент на цвете и настроении для создания сказочной атмосферы.
NARRATIVE_CHAOS: Сочетает клипы для создания хаотичного, сюрреалистичного эффекта.
STORYTELLER: создать связное повествование из клипов.
ACTION_STORYTELLER: Редактируется как голливудский боевик.
POETIC_STORYTELLER: Создаёт визуальную поэму, метафорически соединяя клипы.

Пример подобного монтажа как раз в видео.
Git конечно же есть с максимально простой установкой.

@CGIT_Vines

Это так забавно, как разные модели представляют себе один и тот же запрос.
У Krea1 недавно вышедшей получилось прям по жести, без купюр.
У Midjorney идеально вылизанная картинка с еле заметным намеком на несовершенство.
У GPT как обычно получился сериальный Last of US.

Автоматически хочется интерпритировать это под мемасы с
Huawei
Apple
Android

Мы уже в третий раз проводим Feedback-сессию на базе Mentorcampus.

И сегодня в 19:15 по МСК я отрываю от личных дел целых четырёх лидов разных направлений (Character Art, Environment, Hardsurface, Vehicles, Weapons), чтобы дать вам фидбек и показать ход мыслей: как мы принимаем работу, на что важно обращать внимание и что нужно для соответствия современным стандартам игровой индустрии.

Всех геймдев-любознательных зову сегодня на YT-стрим и в дискорд, который создан, чтобы делиться всем, что связано с созданием контента для игр.

Крутейший пример того, как нужно ловить хайп за хвост! 8-минутный Making of фильма Аронофски Ancestra — и прекрасная возможность для режиссёра Элизы МакНитт вкатиться в киношку через окошко новых генеративных инструментов.

Люблю такие истории, когда люди умеют пораскинуть мозгами. Я всегда уходил из индустрий, если они были на пути к стагнации или когда руководители были недостаточно дальновидными — это важна часть стратегического видения. Поэтому, когда вам пальцем показывают на небо, не смотрите на палец — смотрите на небо! 🌌

1. Забавно смотреть на лицо Ароновски, когда ему на вопрос "Какой хрон мы можем делать генеративом?", отвечают 8 секунд.

2. Они все еще на посте используют Nuke.

Линк на YT

Росс уже в 1999 всё знал!
И стал моделью для поведения, потому что это буквально я, когда в разговоре выдается секундная пауза.

Ну и царь сегодняшних новостей — это Sparc3D.

Реально мощная штука, особенно для большого количества деталей и для органики. Но, как обычно, есть нюансы. Я вчера вечером сидел, тестировал — и вот что могу сказать:

✅ С гео работает всё ещё хуже Хуньяня.
✅ С перспективой работает хуже Хуньяня 🦸 Это даже видно на их черепикнутых моделях для ролика. Гляньте на мотоцикл с колёсами из "Ну, погоди!". Ну и в целом, даже на простых деталях, может посчитать неправильный угол перспективы.
✅ Очень приятно, что в демке генерирует сразу 2 версии модели. Причём на одной может быть полный треш, а на второй — реально удивительная чёткость детализации.
✅ Генерирует без текстур.
✅ Может хорошо сработать на органике — лучше Хуньяня.
✅ Лучший в генерации мелкой детализации на геометрии.

Если у вас каша на картинке — не ждите чудес от генерации.

Хотел свои тесты для вас сделать, но потом посмотрел, что за меня эту работу уже проделали. Поэтому кину примеры в комменты.

Демка
Страница проекта

@CGIT_Vines

Во-вторых, для всех, кто хотел дорваться до бесплатных алгоритмов сегментации — для вас положили демку PartPacker от Nvidia.

Лежит в спейсе Nvidia, имеет настраиваемые параметры: скейла, сида, поликаунта. Количество сегментов, к сожалению, недоступно.

Я изначально думал, что цвета сегментации записываются в Vertex Paint, но по факту он просто генерирует геометрию отдельно, по маске сегментации. Работает с особенностями: например, если у вас не видна деталь, хотя по логике алгоритм её рисует зеркально, то сегментация сольёт её с общим мешем, не отделив. Поэтому убедитесь, что на входящей картинке все части хорошо видны.

И приятный плюс — PartPacker реально быстро генерирует геометрию на полмиллиона. Первенство по качеству геометрии всё ещё за Хуньянем.

Страница проекта
Git
Демка

@CGIT_Vines

Сегодня будет еще несколько раз про 3D генераторы. Во первых разродился Хуньянь и выложил зачем то версию 2.1 в открытый доступ вместо ожидаемой 2.5.

Там нет чего-то принципиально нового. Основное отличие, прокачали PBR модель, в остальном все осталось как в версии 2.0

Git
Офсайт

@CGIT_Vines