🚗 Как видео-нейросети помогают сделать кадры более кинематографичными и не потратить бюджет Парагвая

Мы уже более 8 лет снимаем автомобильные ралли-рейды. Лучше нас это, кажется, никто не делает, даже крупнейший марафон "Silk Way" работает с нами. Но в этом году я решил попробовать кое-что новое прямо на трассе ралли "Северный Лес": из фотки в видео при помощи нейросети.

📸 Фото вместо камеры

Смысл простой: когда нет лишних рук, фоллоу-фокуса и времени, ты просто делаешь фото. А дальше — запускаешь генерацию.

Вместо 30 минут на постановку, слайдер и ожидание идеального света — у тебя уже готов динамичный кадр, причем при наличие сети прямо на телефоне. Плавный облет, блики в объектив, dolly - все что вы хотели но боялись тащить ))))

Все сцены, которые вы видите в этом посте, были созданы именно так.

🙋‍♂️ Когда зрители становятся операторами

Один из самых интересных кейсов — фото, присланные зрителями. Ты не можешь быть везде. Но если кто-то снял аварию, прыжок или эффектный момент — ты можешь оживить этот кадр и вставить его в сюжет.

⚠️ Что важно помнить

Нет, не всё выходит идеально. Иногда нейросеть выдаёт что-то странное. Иногда анимация не туда. Но даже если не получилось с первого раза — попробуешь снова, или пойдёшь другим путём. Главное — это возможность сделать "план Б".

💡 Вывод

Нейросеть растормаживает фантазию. Сколько раз я думал: «Вот бы сейчас сделать тот или иной кадр», — но техники нет, времени нет, через 30 минут закат и конец съёмочного дня. Нейронки дают ощущение, что всё возможно, жалко что только ощущение (пока). В любом случае, это прекрасный инструмент нового времени.

Посмотрим, что будет дальше. А пока — используем то, что работает здесь и сейчас.

9 мая особый праздник, специально к нему мы при помощи нейросетей подготовили это проект.

Для меня это своего рода magnum opus применения нейросетей в телевидении.

Мы взяли фронтовые кадры Эммануила Евзирихина, которыми поделился его внук и мой коллега по телеканалу 360 - Михаил Евзирихин. C помощью нейросети превратили статические фотографии в короткие фильмы: дым клубится, траки танка вращаются, ветви качаются, люди оживают.

Каждый ролик длится около 40 секунд, в нём живут люди и техника Сталинграда, Восточной Пруссии, Праги. Меня всегда завораживала мысль, что за каждой картиной, фотографией, иллюстрацией скрыта история, которую мы зачастую не знаем просто смотря на изображение. Мы попытались немного выйти за край статического изображения и дать почувствовать при каких обстоятельствах, условиях был сделан снимок.

Нейро-хак: правим 3D-сцену без рендера — кейс с МС-21

Из рубрики «лайфхаки/нейрохак». Мои друзья делали проект с самолётом МС-21. Графический дизайнер для «обогащения» добавил в 3D-сцену лишние элементы — ракеты и ящики с патронами. Заказчику это, мягко говоря, не понравилось: военный антураж рядом с гражданским самолётом — не то настроение.

Сроки поджимали, пересобирать и перерендеривать сцену было долго. Решение: зачистили сцену от спорных объектов и выгнали ключевые фазы в виде серии статичных кадров. Дальше подключили нейросеть Pixverse — она умеет собирать плавное движение по последовательности из нескольких изображений (до 7 штук). Результат вышел близким к идеалу — и занял около семи минут.

Один мой друг сравнил это с классической мультипликацией: ведущий художник рисует ключевые кадры, а «кадровщики» дорисовывают промежуточные. Здесь роль «кадровщиков» берёт на себя нейросеть.