HyperReel: High-Fidelity 6-DoF Video with Ray-Conditioned Sampling

Мы много видели способов получить реконструкцию изображения с нового ракурса. Но то все было про статичные изображения, в редких случаях NeRF. HyperReel покажет вам изменение ракурса на видео. Я не понял, сколько исходных ракурсов видео надо ему скормить. Выглядит как магия.
Прекрасно, что можно попытаться поиграть с ним, ибо есть

Код

#novelview #video2video #rendering

Pix2Pix-Video

Налетай тестировать пока не положили huggingface!

Редактирование видео пиксель-в-пиксель посредством текстовых запросов.

#video2video #pix2pix

StableVideo: Text-driven Consistency-aware Diffusion Video Editing

В диффузионный генератор изображений по тексту добавили временнУю зависимость. Получили диффузионный редактор видео по тексту.

Застывшая волна - шедевр. Особенно неудачным кажется пример с автомобилем. Но я сходу уже придумал пару задач которые мог бы решить в своей работе таким редактором.

Код

#video2video