Нейронавт | Нейросети в творчестве

Нейроперевод видео с липсинком от Heygen стал доступен. На старте дают 1 кредит, это в сумме на 1 минуту видео. Максимальный хронометраж одного видео 30 сек. И обещают накидывать 1 кредит в начале каждого расчетного периода (месяц? год? день?). И еще накидывают по кредиту за видео сгенеренное вашим реферралом.

Попробовать

#video2video #lipsync #speech2speech

855 viewsedited 09:44

0:41

VideoReTalking: Audio-based Lip Synchronization for Talking Head Video Editing In the Wild

Генератор говорящей головы с липсинком, лучше недавнего wav2lip.
И даже продолжительное молчание отрабатывает +/- хорошо

Код
Колаб

#wav2lip #lipsync #talkinghead #audio2video

1.4K views11:08

0:36

1:01

Rask.ai

выкатили липсинк-перевод для нескольких спикеров одновременно. Что приятно, для русского есть бета клонирование голоса.

Зацените El Risitas

Попробовать

#lipsync #dubbing #speech2speech #translation

1.4K views07:10

Groq is Fast AI Inference

Самое важное о чем я не успел вам рассказать на прошлой неделе

Groq - самая быстрая альтернатива ChatGPT, быстый - 500 токенов/сек

Chateq - чатбот спорщик, поможет спорить в интернете

Pika научился делать липсинк. Загружаем запись речи и получаем видео с говорящим персонажем

Suno.ai V3 научился генерить музыку без вокала с отменным качеством, до 2 минут

Adobe анонсировали Project Music GenAI Control - генератор/редактор аудио с помощью текстовых указаний.

#llm #assistant #chatbot #news #lipsync #text2music #music2music #audio2aidio

Groq

The LPU™ Inference Engine by Groq is a hardware and software platform that delivers exceptional compute speed, quality, and energy efficiency. Groq provides cloud and on-prem solutions at scale for AI applications.

1.5K viewsedited 12:26

HeyGen 5.0

Что нового
- AI Studio 3.0 - плтформа редактирования видео
- Мгновенные аватары - цифровой аватар, который выглядит и звучит точно так же, как вы
- Перевод видео - конвертируйте видео на разные языки, сохраняя при этом голос оригинального диктора и движения губ
- Персонализированные видеоролики
- Аватар для стриминга

#text2video #video2videp #lipsync #talkinghead #humanavatar #translation #speech2speech

1.7K views07:13

1:01

Koe

Липсинк в стиле аниме

#lipsync

1.6K views05:02

0:09

0:17

1:31

2:04

Hallo: Hierarchical Audio-Driven Visual Synthesis for Portrait Image Animation

липсинк от Baidu по входному аудиофайлу речи или пения. Не просто липсинк, а комплексное оживление портрета. Демки нет, но можно запустить локально

Код

#lipsync #talkinghead #humananimation

1.8K views06:46

0:33

LipDub ai

Сервис для высококачественного липсинка, дубляжа, персонализации видео, замены диалогов на видео.

Советую не мешкать и подать на бету прямо сейчас, собеседования уже расписаны до конца октября.
(Да, вам назначают встречу в Google Meet)

Вписаться в бета тест

#lipsync #dubbing #personalization #speechediting #speech2speech

1.9K views13:02

0:21

0:20

LatentSync: Audio Conditioned Latent Diffusion Models for Lip Sync

Липсинк от ByteDance.
Двигает губы (и челюсть) под звук речи.
Работает по видео.

первое видео на португальском - оригинал, второе на английском - липсинк

Код
Демо
ComfyUI
Попробовать на fal.ai (если есть кредиты)

#lipsync #speech2video #video2video

1.8K views12:47

1:03

Hallo3: Highly Dynamic and Realistic Portrait Image Animation with Diffusion Transformer Networks

Новое поколение липсинка от Baidu

Работает и с головными уборами.
Анимирует не только лицо но и фон.

Все потому что внутри претрейн Cogvideox-5b-i2v

Код
Веса

#lipsync #talkinghead #humananimation #portraitanimation

3.7K views11:04

0:39

trumped.ai

Негерируем фейковые заявления Трампа

#text2video #tts #lipsync #voicecloning

2.5K views09:20