готовы стать героями японского мультика?

в этом колабе можно обработать свое видео в таком около анимешном стиле благодаря алгоритму AnimeGAN2. колаб полностью на русском языке, весь код спрятан, все для людей)
вычисления происходят на удаленном сервере, нужен только браузер!

жду ваши анимации в комменты. и туда же пишите пожелания по доработке или если что то сломается

огромное спасибо Анатолию, без которого это было бы невозможно)
и спасибо Яне которая отлично ест яблоко!

а что если этим колабом стилизовать не селфи а что то посерьезнее? мне поступило предложение опробовать его на клипе Би2 - Пекло. особенно интересно было протестить связку AnimeGan2 и нейро увеличителя Real-ESRGAN с моделю anime. в итоге получилась такая сочная вкусная картинка. по моему результат очень крутой! некоторые кадры после обработки выглядят более динамично и эффектно чем в оригинале. но и косячных тоже немало, потому что алгоритм изначально заточен именно на стилизацию лиц.

активное продвижение этого поста приблизит выход нового колаба в котором любой сможет провернуть подобное)

погружаюсь в нейро оптикал флоу чтоб порадовать вас новым крутым колабом. есть амбициозные планы соорудить свой эбсинт но до реализации еще очень далеко

кто еще не пробовал новую демку гауган2 - скорее пробовать! качество сильно выросло. говорят еще генерацию по текстовому запросу прикрутили. а тут видео с примерами генераций

Вот все смеялись про кнопку "сделать красиво".
А Влад @tech_va_automation взял и сделал.
С помощью ИИ и Foundry's Nuke+Unreal Plugin!
ИИ-кейер и трекер, камера солвер и удаление маркеров - полностью автоматизированный процесс от . Вплоть до раскладывания всей возникающей даты и информации по правильным, post-production ready папкам.
И в отличие от черных ящиков не настраиваемым результатом, здесь на выходе полный набор рулек и педалек, которыми можно докручивать результат до нужного. ИИ-уже за вас посчитал все параметры кейера и прочее, но если вам не нравится, вы можете эти параметры подергать потом.
Еще раз. На выходе не только видео или картинка, а полный набор рулек для софта, с помощью которых получено это видео. Нейросетка не генерит картинку, она генерит значения параметров для софта. А софт считает картинку.
Гениально.
Ну, за кого не чокаясь?

https://www.tech-va.com/

о, какая прикольная штука. онлайн генератор картинок по текстовому запросу. работает на vqgan, довольно шустрый, есть пресеты. айда пробовать!
на картинке выше - кролик в весеннем лесу яркими цветами

🦑 KAPAO | Новая сахарная SOTA на CrowdPose

KAPAO - это эффективный и точный single-stage метод детекции и оценки позы человека. Есть код и веса!

Ресерчеры представили 3 версии: KAPAO-S, KAPAO-M, KAPAO-L

- Эффективный (быстрый) и точный метод
- KAPAO-L(arge) бъет SOTA на CrowdPose
- Решение основано на yolov5 (s,m,l)

💻 Code 📰 Paper

p.s.: ребята шарят и умеют в demo!

Отвал башки! Тут пацаны из гугла обучили NERF на RAW фотках. Получается просто башенного качества рендеринг HDR изображений. Можно менять экспозицию, фокус. Вы только посмотрите на получаемый эффект боке в ночных сценах!

Дополнительное преимущество этого метода перед обычным нерфом - это то, что он хорошо работает на шумных снимках с малым освещением. За счет того, что информация агрегируется с нескольких фотографий, метод хорошо справляется с шумом и недостатком освещения, превосходя специализированные single-photo denoising модели.

Статью ознаменовали как NeRF in the Dark: High Dynamic Range View Synthesis from Noisy Raw Images. Ну, разве что кода еще нет.

Сайт проекта | Arxiv

🔥MTTR: End-to-End Text Referring Video Object Segmentation

Представлена новая SOTA в сегментации объектов на видео по их текстовому описанию. Качество просто невероятное!

Модель основана на мультимодальном трансформере, в который подаются фичи от текстового энкодера (RoBERTa) и видео энкодера (Video Swin). Примечательно, что в отличие от предыдущих решений, обучение здесь end2end — sequence prediction problem.

P.S. Авторы опубликали и код, и веса моделей 👍

Статья, GitHub