тоже моушн
8.88K subscribers
222 photos
247 videos
3 files
408 links
нейромагия + моушн дизайн
тренды, новости, эксперименты

связь с автором @vsewall
Download Telegram
про Вадима Эпштейна я слышу на протяжении всей своей карьеры. этот человек стоит где то у истоков генеративного искусства в россии. художник и программист в одном лице. очень приятно просматривать его работы, это запредельный уровень мастерства. так же Вадим делится некоторыми наработками в гитхабе.
вот по этой ссылке можно поиграть с генератором CLIP, внутри несколько колабов.
кстати Вадим еще ведет курс, где учит создавать нейроарт. а на его патреоне можно получить доступ к колабу, с помощью которого я создал красивости из длинного поста выше
не могу не поделиться. включаешь демо и наслаждаешься реалтайм трекингом скелета. вот бы научиться еще экспортировать анимацию!
Forwarded from эйай ньюз
This media is not supported in your browser
VIEW IN TELEGRAM
GoogleAI выкатил обновление своей риалтайм системы распознавания позы человека BlazePose. Быстрее, точнее, сильнее!

Теперь BlazePose превосходит по качеству не только Apple Vision, но и серверный AlphaPose, при этом оставаясь в реальном времени как на телефоне, так и в браузере. Есть легка и тяжелая версия модели — на все случаи жизни.

Потыкать в веб-демо на жабаскрипте можно тут. Как запустить на Python, JS, Android and iOS читать тут.

Пы сы, не многие знают, но проектом BlazePose в GooleAI сейчас занимаются ребята из бывшего белорусского стартапа AIMATTER, который гугл купил в 2017 году.
This media is not supported in your browser
VIEW IN TELEGRAM
кто здесь повелитель стайлтрансферов?! наконец мне покорился еще один алгоритм, на удивление очень шустрый в плане скорости обработки изображения. плюс он здорово обрабатывает видео, нет заметных скачков между кадрами, а еще ему не страшно большое разрешение. минус в том что ему нельзя просто скормить картинку - источник стиля, требуется долгое обучение на огромном датасете (105 ГБ, Карл!). зато теперь я могу обрабатывать разные видосы в стиле ван гога, моне, сезанна итд. список доступных предобученных моделей есть на гитхабе
как по мне, одна из лучших проверок стайл трансфера на прочность - это обработка видео полетов на дроне. потому что хорошая динамика и меняется ракурс и есть внутрикадровый монтаж. тут я использовал сетку из предыдущего поста. скорость обработки full hd видео 2-3 кадра в секунду, это сумасшедшая скорость для переноса стиля. кое где заметны артефакты, есть даже откровенные косяки. НО - это выглядит как нарисованное 3д и такое даже немного пугает. вперед в продакшн!

на оригинальное часовое видео можно позалипать тут)
Ай как хорошо сделано!
Forwarded from PHYGITAL+ART (Tanya Samoshkina)
This media is not supported in your browser
VIEW IN TELEGRAM
Как насчет GAUGAN, только с подручными предметами?Загляните в проект 2017 года Learning to see: Gloomy Sunday, там нейронная сеть преобразует полотенце в море, а зарядку от телефона в горы)

Важно отметить, что это не “перенос стиля”, а генерация нового изображения на основе семантической маски, в качестве которой выступает оригинальное изображение и его цвета (цвет каждого пикселя исходного избражения интерпретируется, как один из классов семантической маски). Код по ссылке.

Кстати, на следующей неделе мы объявим воркшоп, на котром научим пользоваться нейронными сетями и другими AR/VR инструментами для создания крутого контента без кода! Кому первому отправить ссылку на регистрацию? :)
в среде vfx есть отдельное большое направление - симуляция жидкости, люди годами стараются приблизиться к супер реалистичному результату. хотя мне как обывателю кажется что уже итак достаточно похоже и можно остановиться. а потом из нового ролика на канале TwoMinutePapers выясняется что до идеала еще далеко. а еще можно не тратить часы на просчет симуляции сначала частиц и потом ремешинга финальной геометрии. 6 человек из института в австрии разработали новый способ и достаточно шустрый в сравнении с известными мне решениями. ну очень хочется попробовать.
п.с. хороший комментарий с ютуба - эта вода больше похожа на воду чем настоящая вода)
когда увидел как хитро симулируется водичка из поста выше, вспомнил про прекрасный эксперимент в гудини. chris harkin сделал симуляцию огня а потом полученными векторами скоростей задвигал кривые. получается что то типа анимации волос в воде
на реддите наткнулся на интересный стайлтрансфер. картинки выше - это то что получилось и оригинальное изображение. это огого! кому интересно потыкать колаб - на здоровье