тоже моушн

приключения с люсид продолжаются. теперь мне доступна технология создания шейдера через генератор изображений из текста - CLIP. то есть я могу попросить нейросеть пофантазировать на заданную тему и она выдает готовый шейдер и анимацию записи обучения. первое - иногда волне себе произведение цифрового искусства. второе - красиво и приятно смотреть как проступают образы внутри.

ну и конечно минутка крипоты - вот так меня видит нейросеть люсид. если долго смотреть, иногда видно математическую модель меня

нашел колаб который генерирует glsl код непосредственно с нейронов дипдрима. на выходе получается вот такое. а колаб тут

благодаря Александру Грозных из Генклуба я узнал что результат работы сети люсид можно экспортировать в виде glsl кода, который надо скопировать в шейдертой или например тачдизайнер и он выдаст реалтайм результат близкий по эстетике к видео из предыдущих постов. сеть получает на вход картинку, учится ее воспроизводить. отлично фиксирует цвета и даже угадываются какие то формы с начальной картинки но выглядит очень карамельно и странно.

для меня это все сущая магия! и я не верю до сих пор что можно соединить нейросеть с шейдером, в голове не укладывается) и что вне зависимости от разрешения мы получим тот же красивый результат, потому что математика!

тот же люсид, только другой алгоритм, позволяет делать залипательно красивые переходы из одного натренированного состояния в другое

п.с. мой внутренний перфекционист ругался, поэтому перезалив)

последние три дня я провел в компании очень интересной нейросети - tensorflow lucid. разработчики пишут что это исследовательский проект, для продакшна не годится. но зато годится для создания очень странных психоделичных видео.

признаюсь честно, я не очень шарю в дипдриме. но здесь использованы те же нейроны. кстати, вот подгончик - полный список доступных нейронов. а то дипдрим все знают в основном по собакам и рыбам хотя заложено в него гораздо больше возможностей. а вот из этой статьи я узнал, что это за зверь такой, внутри красивые гифки и ссылки на колабы.

на видео запечатлен процесс тренировки нейронов. мне нравится что это выглядит как открывание глаз на что то непонятное или режим близорукости, а иногда и выход из трипа. а может и вход)
китайцы в зрительном зале, шкворчащее зеленое нечто на сковородке, мятая ткань, пробка на дороге, цветы крупным планом вообще замечательно получаются. только вот результат тренировки никогда не повторяется идеально

тоже моушн pinned a video

давно лежит в закладках и не могу не поделиться. как рисовать грибы осциллографом. вообще это бешеные ребята. мне понравилось интервью с ними на канале smarter everyday. они разработали свой софт, с помощью которого ты можешь записать аудио трек, который при воспроизведении через осциллограф покажет вот такие чудесные анимации. причем даже на старом советском осциллографе это должно сработать

немножко обучил стайлган генерировать несуществующие виды земли со спутника.
музыка: Flying Lotus - Getting There

тоже моушн pinned a video

устроил себе нейро приключения. крашу стайлтрансфером кадры с дронов и не только, потом дорисовываю анимацию в эбсинте и его нерелизнутом пока более крутом старшем брате

вообще мне нравится тренд на использование AI для оживления всего статичного. вот например уже не новая но крутая нейронка, которая добавляет мощный параллакс на любую фотографию и тем самым оживляет ее. такое можно сделать и руками по старинке в афтере, но круто же что можно просто закинуть фотку в колаб и он сам сделает анимацию

@slizing_bot Оригинал

вот это еще понравилось. если подать на вход шевелюру, она тоже поплывет