Мы превратили Знаменитые Мультфильмы в НАСТОЯЩИХ ЛЮДЕЙ.

Недавно на одном из крупных Ютуб каналов появилось видео, где превращают мульт персонажей в реальных.
- YouTube
Под видео была предоставлена ссылка на колаб, что бы каждый мог попробовать, но увы в блокноте была допущена ошибка.

Автор канала @derplearning пересобрал блокнот для ру аудитории.

👉 Попробовать
+ содержится StyleCLIPglobal для манипуляции чертами лица с помощью (текстового запроса) StyleCLIP.

💬 Если вы не в силах запустить колаб, но очень хочется, пишите в чат, научим :)

Осень наступила, совсем грустно и не с кем пообщаться!?
Держите:
- Нейросеть которая думает что она Путин @neural_chat_bot

- Нейросеть обученная на постах с pikabu @ec_bender_bot

(ﾉ◕ヮ◕)ﾉ*:･ﾟ✧

Как работает FaceSwap?

Сегодня мы, расскажем про различные подходы к FaceSwap с помощью нейросетей. Также мы хотим разобраться, какие у разных подходов есть преимущества и недостатки? И главное — как же все это работает?

📖 Читать Habr

🥳 «Яндекс» запустил презентованную в июле функцию автоматического перевода и озвучивания видео, которая работает в «Яндекс.Браузере» и мобильном приложении «Яндекса».

Технология при участии машинного обучения распознаёт речь в видео, транслирует её в текст, переводит через «Яндекс.Переводчик» на русский язык, затем определяет пол говорящего и наносит аудиодорожку перевода с учётом пауз и скорости речи. Результат звучит как дубляж, поверх оригинального звука.

Функция работает в «Яндекс.Браузере» для Windows, macOS, Linux и Android и в приложении «Яндекс» для iOS и Android для видео на английском языке на платформах YouTube, Vimeo, TikTok, Twitter, Facebook и «ВКонтакте». На лицензионном контенте, например, от Netflix, технология не заработает.

Пользователи уже вовсю пробуют новый переводчик «Яндекса» на фильмах в оригинальной озвучке. Один из примеров пришелся на отрывок со знаменитой руганью «Ублюдок, мать твою».

«Слизь, ведро, дерьмо, лицо, комок грязи…» 😁

А вот и полное описание того что «под капотом» у озвучки видео от Яндекса.
📖 Habr

Решил протестировать япереводчик в боевых условиях, а именно на видео посвященного нейросетям.
Тематика видео DeepFaceLive = Глубокое притворство :)
- Оригинал YouTube.
- Более подробный разбор deepfacelive от нашего товарища на ру.
- Актуальные методы замены лица на видео, разбор и сравнение.

Перевод мне понравился, есть не критичные косяки, но главное понять суть видео можно.
Видео в посте с телефона, качество плохое.

Я тут решил сделать небольшой разбор недавнего нашумевшего видео, а также поговорить на тему дипфейков

Зацените Германа Оскаровича☺️

https://youtu.be/4xUBSmRx4rQ

Годнота подъехала.

👍 Би-2 решили побаловаться нейросетями и применили эффект "мультяшки" на свой клип к песне Пекло.
YouTube
Как сделать похожее видео самому можно прочитать тут.

Новый вид дипфейков подвезли 👻
Фотореалистичная анимация говорящей головы в реальном времени.

Live Speech Portraits: Real-Time Photorealistic Talking-Head Animation. https://yuanxunlu.github.io/projects/LiveSpeechPortraits

GitHub

Автор канала Derplearning любезно сделал колаб для нас всех на ру 👍
Подробнее на его канале
https://t.me/derplearning/589

✍️ Text2Animation 🎬

Что-то последнее время только генерация картинок по текстовому описанию у меня и появляется. Настало время исправить ситуацию и представить вам генерацию видео. Управлять всем этим добром не так просто, но внутри Колаба описана вся механика создания анимации, поэтому при желании каждый сможет разобраться. Гененрируется все очень шустро и итоговое качество весьма впечатляющее. Как и прошлый раз добавил переводчик, поэтому текст можете писать на любом языке.

P.S. в прикрепленном видео мы влетаем в Мону Лизу и оказываемся внутри Сальвадора Дали. Что бы это не значило :-)

https://colab.research.google.com/github/tg-bomze/collection-of-notebooks/blob/master/Text2Animation.ipynb

Небольшой, но весьма полезный для каждого обзор улучшалок 2021.
Telegraph Pikabu

Раз речь пошла о стилизации фото, хочу напомнить о очень годном алгоритме нашего знакомого с канала @derplearning

Если коротко, бот 👉 @face2comicsbot
Чуть подробнее тут.
+ Адаптированный бот для создания стикеров в комикс стиле @face2stickerbot

Все боты автора - посмотреть.

Выкатили веб версию StyleClip
(текстовое манипулирование изображениями с помощью StyleGAN).
https://replicate.ai/orpatashnik/styleclip

Суть проста, грузим фото с лицом, задаём текстовое описание neutral, target.

Пример1: загрузил фото Алисы из игры, прогнал через бота, что бы убедиться есть ли лицо на изображении и сразу получить вырезанное лицо.
Neutral = toon, target = photo.

Пример2: Стоковое фото с сайта.
neutral = face, target = male face/sad face.
(Если ввести sad face и поставить значение manipulation_strength с минусом, у нас получится sad face наоборот = happy)
Подробнее о StyleClip

🌞 Поделиться результатами.