Нейронавт | Нейросети в творчестве

Interpolating between Images with Diffusion Models

Интерполяция изображений диффузионными моделями через латентное пространство с использованием ControlNet. Проще говоря, плавный переход от одного изображения к другому.

Код

#image2image #image2video #frameinterpolation

732 views08:32

2:40

Media is too big

AnimeInbet: Deep Geometrized Cartoon Line Inbetweening

Интерполяция промежуточных кадров лайнарта в анимации с учетом геометрии. Есть тут аниматоры чтобы оценить?

Код
Видео полной презентации, 7 минут

#frameinterpolation #animation

1.1K viewsedited 06:56

1:47

DynamiCrafter: Animating Open-domainImages with Video Diffusion Priors

Анимация изображений по текстовому описанию, интерополяция кадров на видео, закольцовывание видео

Код
Демо

#image2video #video2video #frameinterpolation

1.2K views10:59

14 марта обновился видеогенератор DynamiCrafter

Добавили интерполяцию кадров и зацикливание видео.
Разрешение новых моделей 320x512 🫤

Гитхаб

#text2video #image2video #frameinterpolation #loop

Please open Telegram to view this post

VIEW IN TELEGRAM

1.7K views08:42

VIDIM: Video Interpolation With Diffusion Models

Диффузная интерполяция кадров (слоумоушен) от Google Research и DeepMind. Затыкает за пояс и RIFE, и FILM (гугловский же)

Что с кодом, Гугл?

#frameinterpolation #slowmotion

1.5K viewsedited 11:48

1:20

ToonCrafter: Generative Cartoon Interpolation

Подъехала новая магия: мультяшная фазовка. Иначе говоря, интерполяция кадров, но не простая. Даем тункрафтеру два кадра, на выходе получаем кадры между ними. Выглядит прям мультяшно. Сравните с результатами интерполяторов, заточенных на видео (на сайте много примеров).

Ну и есть понятные границы возможностей - см в самом низу сайта.
Авторы планируют добавить контроль эскиза и заливку

Код

#frameinterpolation #animation

1.7K views07:10

0:02

tost.ai

ToonCrafter не озаботился демкой, а на Toast.ai уже можно его пощупать.
Это бесплатный сервис-хост генеративных нейросеток от автора многих демоспейсов и колаб ноутбуков. Набор небольшой пока, но разнонаправленный. Пользоваться можно после несложной регистрации.

В день дают 100 кредитов на бесплатное использование. Ну и можно, став спонсором сервиса, получить больше генераций.

Ну а можно и подключить туда свой GPU если у вас лишние мощности простаивают.

По Toonkrafter: работает быстро! на видео пример генерации за несколько секунд

Приятного бесплатного пользования

#tool #frameinterpolation #animation

1.7K views11:38

GitHub - kijai/ComfyUI-DynamiCrafterWrapper: Wrapper to use DynamiCrafter models in ComfyUI

ComfyUI-DynamiCrafterWrapper

Я еще не писал что ToonCrafter прикрутили в ComfyUI? Какое чудовищное упущение! Вот, пишу.
Готовьте много VRAM.

У кого не хватило - идем в tost.ai

#tool #frameinterpolation #animation

GitHub

Wrapper to use DynamiCrafter models in ComfyUI. Contribute to kijai/ComfyUI-DynamiCrafterWrapper development by creating an account on GitHub.

1.7K viewsedited 05:34

0:05

Generative Inbetweening: Adapting Image-to-Video Models for Keyframe Interpolation

Новый интерполятор кадров от Google DeepMind. Посмотрите на сайте насколько он круче FILM. Из двух кадров делает видео

А почему они не сравнили его со своим же VIDIM?

Код

#frameinterpolation #slowmotion

1.7K views11:20

0:04

Появился демоспейс интерполятора кадров Generative Inbetweening
Работает он, кстати, на базе #SVD
Все не так хорошо как хотелось бы.
Детали съедает, объекты идут артефактами

Демо

#frameinterpolation #slowmotion

1.8K views08:35

2:14

Framer: Interactive Frame Interpolation

Интерполяция кадров с контролем траектории.
Кажется, пора уже вводить термин креативная интерполяция кадров

Код ждем 28 октября
Демо ждем

#frameinterpolation #slowmotion #motioncontrol

1.6K views16:17

Можете потыкать демку интерполятора кадров Framer
Код задерживается

Демо

#frameinterpolation #slowmotion #motioncontrol

1.6K views11:10

1:15

Media is too big

GIMM-VFI: Generalizable Implicit Motion Modeling for Video Frame Interpolation

Интерполяция кадров, создает кадры между существующими

Код

#frameinterpolation #slowmotion

1.7K views14:41

1:24

Media is too big

Topaz Labs Video AI 7

реставратор видео Starlight mini - видимо, облегченная для локального запуска версия - доступен в платном пакете от Topaz Labs за жалкие $249, с целым годом грядущих обновлений

Помимо наваливания разрешения с деталями есть интерполяция кадров (слоумойшен) и (!!!) работа с .EXR - что вообще уникально. Хотя возможно, я слишком мало интересуюсь коммерческими реставраторами

Спасибо @MIXTRESH

#videorestoration #restoration #denoise #deblur #antialias #upscalevideo #enhance #frameinterpolation #exr

1.7K views08:29

1:17