тоже моушн

Ай как хорошо сделано!

как по мне, одна из лучших проверок стайл трансфера на прочность - это обработка видео полетов на дроне. потому что хорошая динамика и меняется ракурс и есть внутрикадровый монтаж. тут я использовал сетку из предыдущего поста. скорость обработки full hd видео 2-3 кадра в секунду, это сумасшедшая скорость для переноса стиля. кое где заметны артефакты, есть даже откровенные косяки. НО - это выглядит как нарисованное 3д и такое даже немного пугает. вперед в продакшн!

на оригинальное часовое видео можно позалипать тут)

кто здесь повелитель стайлтрансферов?! наконец мне покорился еще один алгоритм, на удивление очень шустрый в плане скорости обработки изображения. плюс он здорово обрабатывает видео, нет заметных скачков между кадрами, а еще ему не страшно большое разрешение. минус в том что ему нельзя просто скормить картинку - источник стиля, требуется долгое обучение на огромном датасете (105 ГБ, Карл!). зато теперь я могу обрабатывать разные видосы в стиле ван гога, моне, сезанна итд. список доступных предобученных моделей есть на гитхабе

ой, для особо ленивых даже колаб прикрутили

GoogleAI выкатил обновление своей риалтайм системы распознавания позы человека BlazePose. Быстрее, точнее, сильнее!

Теперь BlazePose превосходит по качеству не только Apple Vision, но и серверный AlphaPose, при этом оставаясь в реальном времени как на телефоне, так и в браузере. Есть легка и тяжелая версия модели — на все случаи жизни.

Потыкать в веб-демо на жабаскрипте можно тут. Как запустить на Python, JS, Android and iOS читать тут.

Пы сы, не многие знают, но проектом BlazePose в GooleAI сейчас занимаются ребята из бывшего белорусского стартапа AIMATTER, который гугл купил в 2017 году.

не могу не поделиться. включаешь демо и наслаждаешься реалтайм трекингом скелета. вот бы научиться еще экспортировать анимацию!

про Вадима Эпштейна я слышу на протяжении всей своей карьеры. этот человек стоит где то у истоков генеративного искусства в россии. художник и программист в одном лице. очень приятно просматривать его работы, это запредельный уровень мастерства. так же Вадим делится некоторыми наработками в гитхабе.
вот по этой ссылке можно поиграть с генератором CLIP, внутри несколько колабов.
кстати Вадим еще ведет курс, где учит создавать нейроарт. а на его патреоне можно получить доступ к колабу, с помощью которого я создал красивости из длинного поста выше