✨ Новая функция в HeyGen — подробный обзор

HeyGen запустил классную функцию, которая позволяет создавать реалистичных цифровых аватаров, используя только фотографии.

Для чего это нужно?
Если вы хотите создать аватар для клиента, но нет времени и желания мучить его видеосъёмками, или у вас есть красивая фотосессия, из которой можно создать свой уникальный образ — это идеальное решение. Чем больше качественных фото загрузите, тем лучше получится передать черты лица и сохранить естественные детали.

Фактически, вы обучаете нейросеть и затем прописываете текстом, что хотите видеть. Нейросеть генерирует изображение с вашим лицом, после чего вы выбираете понравившееся и озвучиваете. Липсинк срабатывает автоматически.

Ранее для получения результата нужно было проходить несколько этапов в таких нейросетях, как:
- создание изображения с персонажем в Midjourney/DALL-E и других,
- замена лица в FaceSwap,
- анимация в Runway/Kling/MiniMax,
- для озвучки EllevenLabs
- добавление липсинка в Runway/Kling.

Что получилось у меня?

Я загрузила 15 фото в разных ракурсах, включая одну с широкой улыбкой, чтобы нейросеть уловила, как я выгляжу в разные моменты.

Результат немного разочаровал. Само изображение было сгенерировано идеально, но после аминирования оно добавило мне 10-20 лет. Как видно в прикреплённом примере. Я пробовала всё, чтобы исправить это, но не помогло.

А так же есть дефекты в виде парящей сумки, но такое генерит он редко. Я решила вам показать, как есть.

А вот с героем, созданным по промпту, всё получилось идеально.

Попробовать бесплатно можно тут