CGIT_Vines

Альтман на этой неделе планирует провести ряд встреч с голливудскими студиями, зайти на пару вечеринок в Лос-Анджелесе. Как вы думаете, зачем?

Очевидно, выдав доступы художникам, арт-директорам, скульпторам и т.д., он хочет показать потенциал SORA в художественном плане и договориться о наименее разрушительном внедрении для индустрии нового инструмента.

Если мы продолжим видеть сокращения персонала и закрытие постпродакшн студий по всему миру, то свяжем это, очевидно, только с одним.

У крупных студий еще останется возможность держаться на плаву, т.к. графика — это не только красивая картинка, но также множество параллельных процессов, созданных для выпуска финального продукта. А вот средним и мелким студиям, фрилансерам, придется очень тяжело.

Для игр я тоже вижу потенциальную опасность в том, что часть работ может уйти на сторону генераторов, например, пропсы, материалы, fx, если (когда) для этого появятся удобные инструменты управления.

Будет ли иметь SORA возможность выдавать свое трехмерное пространство, или это придется делать через сторонние алгоритмы, не суть важно; в финале мы будем получать трехмерный продукт со всеми сопутствующими материалами для дальнейшей интеграции в движок.

https://qz.com/openai-sam-altman-sora-hollywood-1851360971

Как говорится, было классно работать с вами, друзья.

У Sora сегодня новые демки https://openai.com/blog/sora-first-impressions

А одна из моих любимых студий PostPanic объявила о закрытии. Это в копилку к еще паре среднего размера студий закрывшихся за последние недели.

Кто говорит «ai это просто инструмент» давайте дружить - вместе будем разносить еду в кафе и мыть посуду, лучше связи налаживать заранее

OpenAI дали доступ к SORA разным креативным людям по миру – и те показали свои первые работы с ней.

Выкачал вам все примеры – как по мне, довольно клево вышло, в руках профи SORA по настоящему раскроется.

Пост тут:
https://openai.com/blog/sora-first-impressions

На последней презентации показали версию 5.4 preview добавили супер-облегчённую версию Metahuman в UEFN, выпустили в релиз Chaos, созданный для симуляции физики и разрушений. И в целом Epic совершенствует инструменты, чтобы сделать движок удобным в создании контента и полноценных игр, почти не покидая среды разработки движка.

Мы уже поняли, что игры — это новые сериалы, и ренедрить красивую картинку легко, и по процессам это не сложно. Меня теперь интересует упрощение создания логики. Действительно ли так же просто в UEFN составлять логические блоки для ИИ, логики взаимодействий с объектами, скриптовыми эвентами, диалогами и т.д.?

Сейчас, за всю историю игр, наверное, идёт самый активный процесс фундаментального изменения парадигмы создания игр. Он идёт внутри крупных компаний тоже, просто модель бизнеса Epic такова, что они обязаны выставлять эти процессы на показ.

Просьба к сообществу: если вы уже занимаетесь созданием игры на UEFN или у вас есть знакомые, и им есть что рассказать, позовите их, пожалуйста, сюда, я бы с удовольствием сделал про это подкаст.

На видео как раз UEFN.
State of Unreal на Youtube

На GDC успел собрать и сторонников, и хейтеров движок для AI NPC — Inworld Engine.

За "мозги" проекта отвечала Ubisoft с модулем Neo NPC, который собрал в себе алгоритмы мышления и определения контекста мира.

Вторым модулем выступил Narrative Graph, разработанный совместно с Xbox. Это инструмент, который помогает разработчикам создавать динамичные повествования, которые адаптируются к выбору игрока, способствуя более глубокому вовлечению. Переход от устоявшихся нарративных пайплайнов к генеративным будет подобен переходу от 2D-графики к 3D-графике.

Пора срочно переписывать нарративные курсы.

Несмотря на то что в процесс создания новых пайплайнов вовлечены студии с такими громкими именами, они сильно опасаются прямо говорить слова "создание" и "генеративный ИИ" в одном предложении, дабы в очередной раз не получить от беснующейся толпы за уничтожение профессий.

Но дело в том, что хейтеры, говорящие о том, что никогда не будут играть в игры, в которых что-то создано при помощи генераций, в какой-то момент перестанут понимать, где эта самая генерация, а где контент, созданный человеком, а потом, по иронии, будут путать в пользу ИИ. Ну и еще есть банальная сменяемость поколений 🤡
Так что этот процесс необратим.

По вашему мнению, в будущем Portal 3, GLaDOS должна быть прописана человеком или ИИ? Кстати, она будет написана и иметь функции реального генеративного ИИ, скриньте!)

💣 Одним из самых запоминающихся моментов с конференции Nvidia GTC 2024 стало выступление Хуанга, когда он под конец попросил выйти на сцену двух маленьких роботов, выполненных в стилистике "Звёздных войн".

Эти роботы — не просто аниматроника; они научились ходить с помощью платформы Isaac Sim — платформы для моделирования робототехники.

Мы привыкли воспринимать большую часть информации посредством картинок и видео из интернета, но только представьте, что что-то, что само научилось ходить и видеть, проходит в таком виде мимо вас. Мне кажется, первый контакт будет незабываемым и запомнится на всю жизнь.

Я вижу довольно много интересных проектов от отечественных разработчиков, про которые хочу написать, но не всегда, к сожалению, хватает времени.

Один из таких — это "Заря", симулятор доставки товаров, в процессе которого вы встречаетесь с местными жителями, слушаете их истории, помогаете, зарабатываете деньги, собираете советский автопарк.

И все это в атмосфере, которую, я уверен, если вы отъедете на километров 100-200 от вашего родного места, без проблем сможете найти, и не важно, в какой стране вы жили, вы знаете эти вайбы.

Разработчикам сил довести все это до релиза! "Заря" уже в вишлисте.

3D Sampler от Adobe представил генерацию текстур text2texture прямо внутри софта. Логичный ход от компании, и еще более логичный для меня.

Я, конечно, обожаю Substance Designer и всю его нодовую процедурность, но еще в год его релиза стало понятно, что профессия material artist'a это не надолго. По крайней мере в том виде как она появилась.

В перспективе вся суть создания материалов в том, чтобы собрать описание всех возможных материалов и дать возможность говорить, что конкретно тебе нужно.

Старая прогнившая половая доска на болоте или морской коралловый песчанник с фактурой змеиной кожи.

Получив базу, уже нодами и генерируемыми масками доводить результат до желаемого. И чтобы на выходе иметь не только набор текстур, а полноценный физмат со звуками, футстепами, импактами и т.д.

Обожаю и скульпинг и создание материалов, уверен, что и fx настолько же медитативно интраверсивное занятие, чистое творчество!

Но убрать рутину необходимо!

Прекрасно, что есть возможность посмотреть на возможности движка, которые будут так или иначе интегрированы в ближайшем будущем в игровые процессы. Когда-нибудь использование Embergen в виде as it is не будет чем-то ресурсоемким.

Сейчас очень мало примеров использования непредпросчитанных волюметриков в играх; их чаще всего стараются спрятать в зоны с маленькой нагрузкой на вычисления. Есть исключения, типа RDR, но не у всех есть техотделы такого размера.

В этом примере спеков не пишут, на которых все крутилось, подозреваю, что-то из 4 серии, т.к. рендерить окружение, пусть и процедурное, с минимальным количеством материалов и инстансовым фолиажем, все равно задача не из легких.

Есть у меня такое ощущение, что крупные игровые компании, с оптимизацией бизнесов в 22-23-24, увольняя довольно ценных специалистов, арт-директоров, а также директоров разных направлений, побочно запустили процессы, когда в головах создателей и разработчиков зародилась мысль, что крупные студии совсем не то райское место, на которое стоит тратить свои силы и годы жизни.

Т. к. игры сейчас разрабатываются не настолько сложно, как 10-20 лет назад, когда не нужны раздутые штаты, многомиллионные бюджеты и годы разработки (привет, Skull and Bones). Сейчас разработка больше становится похожа на создание сериалов, и эта тенденция будет продолжаться.

И в этой новой реальности, когда у тебя уже есть многолетний опыт создания продуктов и ты понимаешь, на каких процессах строится разработка, принять решение уйти из какого-нибудь Ubisoft или Blizzard уже не кажется прыжком в бездну. Найти инвестиции тоже не составляет труда, если у тебя есть имя, навыки, прототип и немного связей. Вот и получаем ситуацию, когда идет перераспределение производственных мощностей в маленькие студии, которые менее рискованны, потому что в случае неудачи могут потерять на порядки меньше вложений, но если успешны, делают х10, х50.

В последнее время очень много студий образовываются подобным образом, и что-то мне подсказывает, что такая система производства будет более успешной и популярной. В такой системе, к счастью или к сожалению, не просидишь 10-17 лет в одной студии; придется мигрировать от проекта к проекту, такова новая реальность.

Кто-то замечал подобные тенденции?

Главное, не давайте ему играть в Manhunt!

DeepMind показали SIMA (предлагаю так и читать, Сима), ИИ агенте, обучающемся навыку играть в игры как человек. Т.е. буквально это агент, который играет в обычные игры вроде No Man's Sky, Goat Simulator и мой любимый Valheim, чтобы научиться играть так, как это делают живые люди. ИИ учится на разных играх, так чтобы потом получая новую игру он смог разобраться в ней, как люди. И для обучения он считывает содержимое экрана и издает сигналы от мыши и клавиатуры, как человек. Ничего не прочитал про восприятие звука, но было бы очевидно использовать и его тоже.

Не думайте что это просто забава, ИИ наученный играть в игры потенциально может взаимодействовать так же и с реальным миром, не так уж сильно они отличаются [o] https://www.theverge.com/2024/3/13/24099024/google-deepmind-ai-agent-sima-video-games

Очень крутой и узкий кейс применения VR в космосе. На случай, если заскучал по березкам или любимой набережной.

Круто, что это не какой-нибудь пример, а реальное применение технологии для поддержания психического здоровья в условиях жесткой изоляции. Применяется на МКС.

Вышел в доступ инструмент для управления поведением цифровых агентов.

🧠 Первый, SAGA (Skill to Action Generation), который настраивает поведение.

Агенты сначала сообщают контекстуальные метаданные SAGA о себе и своем мире посредством сопутствующей симуляции: кто они; что они знают; какие у них «навыки»; и каковы их цели. Затем, когда агент решает, что делать дальше, SAGA генерирует набор «действий», которые лучше всего служат целям агента в данный момент. Эти варианты действий затем оцениваются и возвращаются в симуляцию, чтобы дать указания агенту. Этот процесс повторяется каждый раз, когда агент решает свое следующее действие, и может быть масштабирован для одновременной работы нескольких агентов.

🧠 И второй, MAGE (Multi-Agent Gym Environment), представляет среду, песочницу для взаимодействия агентов. По сути, это окружение, в котором агенты существуют, выполненное в стиле городка Дикого Запада (хех, совпадения с Westworld случайны).

Для вас на выбор 15 агентов со своей историей, что называется метавоспоминания. Далее вы можете моделировать события, на которые агенты будут реагировать исходя из набора своих навыков и подобия "воли".

Подозреваю, что прямо сейчас профессия нарративщика обрастает новыми навыками: теперь не просто нужно написать историю, но и в достаточной степени натренировать и настроить модули ИИ поведения для агентов, его характер, прописать метавоспоминания и цели.

Я бы с удовольствием сделал бы подкаст с людьми, которые глубоко окунулись в моделирование поведения игрового ИИ с помощью подобных инструментов. Пишите!