тоже моушн

а я не знал, айда пробовать!

и еще немного на тему вырезания. забыл совсем про этот проект. тут по сути довели до ума довольно простую идею: чтобы вырезать человека из фона, надо сначала щелкнуть фон без человека и потом хитрыми манипуляциями отделить одно от другого. выглядит как очень хороший результат. круто что на гитхабе есть колаб, в котором можно сразу попробовать

добавил в свою жизнь немножко фитнеса)
взял вот этот арканоид с шейдертоя, портировал его в тачдизайнер, прикрутил управление телом вместо мыши с помощью mediapipe. ну и немножко нейросетевой магии для красивой картинки)

есть и другой вариант, чуть более ручной и за денежку. нужно показать сетке какой объект на видео необходимо вырезать и проверить, как она интерполировала границы объекта по таймлайну, и помочь если ошибается. вот веселый урок про это

нейро-ротоскопинг. пришлось немного погрузиться в эту тему, так как предстоит по работе вырезать человека без хромакея. делать это вручную - ну такое. есть полуавтоматическая вырезалка в афтере - вариант, но долго. поискал что на этот счет предлагают нейросети. и оказалось что хороших реализаций не так уж и много. успешно смог запустить вот эту.
минусы - есть косяки и нет особых настроек, работает автоматом. плюсы - это очень быстро. поправить несколько косячных кадров гораздо проще чем вырезать целый длинный фрагмент. ну и главное - это можно реализовать в колабе и запустить с любой машины. пока что слегка через костыли, но способ рабочий. так что если кому то будет необходимо, обращайтесь)

тоже моушн pinned «записал урок для тех кто очень хочет разобраться но не знает с чего начать. за косяки по звуку сорян, обещаю исправиться) ну и конечно лайк репост пиписка!»

записал урок для тех кто очень хочет разобраться но не знает с чего начать. за косяки по звуку сорян, обещаю исправиться) ну и конечно лайк репост пиписка!

Тут забавно оказалось – если в нейронку которая генерирует картинку из текстового запроса, в конце запроса дописать «unreal engine», то качество генерации сильно повысится 🌝 то есть буквально, ссылаясь в тексте на что-то у чего обычно офигенная графика, можно улучшить качество генерации.

Вот две картинки сгенерированные из текста с припиской в конце «unreal engine» – ангел воздуха и ангел воды ✨ можете сами попробовать в колабе тут

трекинг скелета для бедных)
после нескольких дней сражений я таки смог передать массив точек из пайтона в тач. для такого трекинга не требуется дорогой кинект, в моем случае хватило камеры телефона и алгоритма mediapipe

на реддите наткнулся на интересный стайлтрансфер. картинки выше - это то что получилось и оригинальное изображение. это огого! кому интересно потыкать колаб - на здоровье

когда увидел как хитро симулируется водичка из поста выше, вспомнил про прекрасный эксперимент в гудини. chris harkin сделал симуляцию огня а потом полученными векторами скоростей задвигал кривые. получается что то типа анимации волос в воде

в среде vfx есть отдельное большое направление - симуляция жидкости, люди годами стараются приблизиться к супер реалистичному результату. хотя мне как обывателю кажется что уже итак достаточно похоже и можно остановиться. а потом из нового ролика на канале TwoMinutePapers выясняется что до идеала еще далеко. а еще можно не тратить часы на просчет симуляции сначала частиц и потом ремешинга финальной геометрии. 6 человек из института в австрии разработали новый способ и достаточно шустрый в сравнении с известными мне решениями. ну очень хочется попробовать.
п.с. хороший комментарий с ютуба - эта вода больше похожа на воду чем настоящая вода)

Как насчет GAUGAN, только с подручными предметами?Загляните в проект 2017 года Learning to see: Gloomy Sunday, там нейронная сеть преобразует полотенце в море, а зарядку от телефона в горы)

Важно отметить, что это не “перенос стиля”, а генерация нового изображения на основе семантической маски, в качестве которой выступает оригинальное изображение и его цвета (цвет каждого пикселя исходного избражения интерпретируется, как один из классов семантической маски). Код по ссылке.

Кстати, на следующей неделе мы объявим воркшоп, на котром научим пользоваться нейронными сетями и другими AR/VR инструментами для создания крутого контента без кода! Кому первому отправить ссылку на регистрацию? :)

Чет залип, штуки by Igor.m

Обязательно со звуком