CGIT_Vines

У меня всегда вызывали интерес тестовые полигоны для тестирования функций ИИ.

Ниже пример такого полигона, AI warehouse, где AI по имени Albert учится ходить превозмогая изощрённые попытки его унизить.

При чем обычно учат ходьбе либо по данным мокапа либо учат подражать ходьбе, в этом рисере все по честному, после каждой попытки сетка енестраиватся учитывая успешные и неуспешные попытки.

Интересно сравнить сколько итераций человеческий мозг и искусственный проходят пока не научатся двигать двумя мясными отростками.

Спойлер, в конце он научился убивать и ходить!

Сорс

Сейчас техника дорисовки ( matte painting ) или изменения пространства в кино очень обширна. Сложнейшие симуляции, реалистичная графика и отслеживание движения камеры, позволяют на postproduction этапе создавать точнейшую иллюзию, того что мы видим.

Но так было не всегда. Когда не было компьютеров киношники обходились различными трюками. При статичных кадрах буквально перед камерой ставили стекло на котором дорисовывали в реалистичной манере то. чего не было в кадре. Так рождались первые постапокалиптические и фантастические миры.

Когда Youtube выдал мне подборку Matte painting из старых фильмов.
Меня осенило! Генеративная заливка нового фотошопа, идеальный инструмент для того, чтобы создавать целые куски локаций. Итоги эксперимента вы можете увидеть выше!

Меня как раз недавно спрашивали, можно ли через depth мапу получить сносную геометрию, чтобы использовать в играх.

Вот тут показан процесс на 6 минут пайплайна через карту глубины. Заспойлерю, можно китбашить, прототипировать что-то быстрое, но это в продакшн не годится пока.
Лицо из метахьюманов.

Смотреть пайплайн

Ну и вот пока вы пишете, вам полезный контент.
У меня, честно говоря, отвал жопы случился!

Эта тримшит текстура 128х128px из первого Quake рисовалась попиксельно, мышкой в ФШ.
И с одной стороны, понимаешь, как страдали художники прошлого, а с другой, видишь, насколько охеренно нарисована сама текстура. Насколько богатые цвета, кто знает, тот поймёт.

И всё это ещё раз в подтверждение моих вайнов на счёт обучения художественной базе, а не тыкать в нейронки без какого-либо понимания. Хоть это тоже круто 🤡

Я, кстати, вообще понятия не имею, что вы у меня любите тут.

Я не смотрел и не анализировал даже. Просто посчу всегда, что меня самого прёт, вам вроде тоже нравится. Знаю, что часть людей из геймдева и часть из смежных профессий: из поста, моушена, ну и все прутся по нейроночкам и генеративу, конечно.

Напишите в комменты свои профессии, которые я не упомянул, очень интересно почитать будет. Люблю вас ❤️

Как оголтелый технооптимист, не могу не поделиться чудесным ресурсом:))
Он не новостной, он как раз про историю. Там любовно собраны аж с середины XIX века публикации (в виде сканов по причине отсутствия цифрового формата в те дикие времена) о вреде технологий и новых медиа.
В качестве примера на картинке к этому посту статья почти столетней давности, где снижение успеваемости в школах и проблемы со сном у взрослых связывают с появлением радио:)
За прошедшие полтора с хвостиком века что только не обвиняли в бедах человеческих: романы и телефонию, телеграф и велосипед, кинематограф и автоматические лифты… Очень любопытно все это просматривать, обнаруживая живучие и по сей день существующие штампы и узнаваемые интонации алармистов.
Pessimists Archive is a project to jog our collective memories about the hysteria, technophobia and moral panic that often greets new technologies, ideas and trends.

Простите, правда, постараюсь ограничить количество генераций без полезной нагрузки. Но я не могу пройти мимо Дня Независимости штатов в таком исполнении.

Одно из важных характеристик искусства - это способность находить отклик внутри человека, общества и вызывать сильные эмоции, это конечно вопрос всегда спорный и дискутируемый.

Кажется, что генератив намеренно или нет, с манипуляцией эмоциями справится, как будто бы это естественный для него путь. Путь знать нас лучше нас самих и дергать за эти ниточки.

Было бы совсем прекрасно, если бы это видео получилось только лишь с одним промптом, "показать культуру", готовы ли мы будем посмотреть в лицо алгоритмам без прикрас пропаганды, в лицо культуры, в лицо нас самих?

Думал угарно напишу, а получилось не очень, но видос знатно тащит. Доброго утра!🖕

Не реклама 👺
Мой хороший знакомый попросил меня поделиться своим каналом, где он выкладывает тесты симуляций в разных софтах и плагинах.

15 лет стажа в симуляциях - это еще постараться надо. Канал только стартовал, так что скромный и от этого ламповый, всегда можно обратиться напрямую к Леше за советом или фрилом.
Кому-то помощь, а дядe Лешe будет приятно!
Также у него есть второй канал с авторскими текстурами; информацию можно найти в шапке его канала.

https://t.me/particles_ru

Я не знаю, чего вы хейтите, по-моему, получается очень круто!

1. Берем Google MusicML, "пишем" атмосферный трек.
2. Добавляем аранжировку в Ableton.
3. Берем Gen-2, делаем видеоклип.

Итого, при временных затратах в течение недели вашего свободного времени, вы - человек-студия.
Кто там еще боится, что работу потеряет? Работать будем больше, это да, этого бояться надо)

Тут можно глянуть версию в HD
Сраться предлагаю в коментах)

На днях исследователи из Принстона, отделения нейронаук, выпустили в открытый доступ полное описание структуры связей в нервной системе плодовой мушки, или (Коннектом). Область исследований включает в себя картографирование и анализ архитектуры нейронных связей.

Конечно, здесь не обошлось без помощи ИИ. Картографирование и анализ такого объема связей без него были бы просто невозможными.

Речь идет о примерно 130 тыс. аннотированных нейронов и десятках миллионов типизированных синапсов!
Для этого исследования даже есть отдельный аккаунт в Twitter с аннотациями и пояснительными видео.

Почитать про исследование подробнее
Видео архив

Вот я вчера на конфе касался новых профессий и индустрий, куда можно будет вкатываться, имея при себе довольно скромные инструменты в виде компа и видеокамеры. Пишите сценарии, подснимайте футажи, монтируйте, делайте свой контент.

Как Sway Molina в этом посте, где он расписывает пайплайн, как он снимает этот короткий метр. У него на это ушло полтора дня.

Пайплайн тут
Видос в HQ тут

Очень вдохновляющий пример энтузиаста, который озвучивает разные части GTA своим голосом, пропускает все это через нейронку RVC v2.

Получается гораздо лучше, чем я ожидал. Не идеально, но поставьте себя на место актеров озвучания. Они, конечно, могут сейчас продавать свои голоса для тренировки датасетов. Пока сетки не научились подбирать тембр, а дальше уже надо будет думать, что делать.

Давайте придумаем варианты, куда пойти работать актерам озвучания?

Сервис Aalab упрощает работу со сторибордами, казалось бы, очевидное применение сеток, но нам нужен для этого отдельный сервис с про подпиской. Окей, там есть полезные функции, но когда мы начали называть бизнесом GUI для открытых алгоритмов?

Отдельным пунктом порадовал Special Feature - Downscale. 🤦🏼
Ладно, может, я зря подгораю, вдруг вам пригодится.

Так получилось, что меня пригласили на конференцию по нейросеткам.

Предупрежу, что я там рассказывал прямо про супербазовые вещи. Отвечал за ситуацию с нейросетями в геймдеве. Показывал, как я применяю их в работе, и отвечал на вопросы.

Советую всем, кто совсем недавно вкатился и ещё не очень понимает, что это и куда будет двигаться вся эта хайп-волна.

Смотреть

https://www.youtube.com/live/FbsGtyEIYh4?feature=share&t=5416

Replica Studios сделала войс плагин для движков, позволяющий озвучивать внутриигровых персонажей и передавать голоса непосредственно в проекты. Кроме игровых движков, совместим также с Iclone, Omniverse, Roblox, Metahuman.

Цитата компании: "NPC, управляемые искусственным интеллектом, будут динамически реагировать на голос игрока в реальном времени. Персонажи будут менять свой диалог, эмоциональный тон и жесты тела в ответ на то, как игрок обращается к ним."

Демку можно скачать тут

Адобченко не унимается.
Показали очень ранний прототип новой ИИ-тулзы Gingerbread.
Как я понял, это отдаленный аналог ControlNet, только с нормальным UI и без этих вот всех десятков слайдеров-параметров.

Там даже засветился нормальный 3Д-манипулятор и оси вращения(!).

Можно менять освещение, ракурс, перспективу и даже перетаскивать сгенерированные объекты (привет драгГАН). С помощью промптов.

Адобченко, давай, жги.

https://petapixel.com/2023/06/27/adobe-previews-new-ai-image-generator-tool/

Я ни на что не намекаю