А вот обложка с превью на ютубе. Я, конечно, тот ещё дизайнер, но вроде норм :)

Ура, у нас первый юбилей и вас уже 50 🥳
(На скрине процесс сегментации маски XSeg Editor)

Не знаю даже, чем можно порадовать всех в пятницу. Пусть это будет Андуин Бин :)

#deepfake #neuralcringe

Друзья, я видел такое, что вам людям... к сожалению я не могу радовать вас контентом так часто, как мне бы хотелось. Специфика подготовки материала, последующее обучение модели вкупе с финальной обработкой занимает довольно таки много времени. А заполнять пустоту репостами из других нейросетевых групп тоже не очень клёво. Но я постараюсь :)

Всё-таки переделал и выложил на ютубe в 1080p. Тут и ремастер получше получился и сами лица.

https://youtu.be/H_1lQr0L-Mk

Спор Эйнштейна и Бора о спинах частиц. Представляю, что так и было на самом деле :)

by Schrödinger's cat

Том Круз и Роберт Дауни Младший в рекламе шаурмы.

Ради интереса проверил модель "Ready-to-merge", которая не требует длительного обучения, на рекламе шаурмы. Блин, да это же вообще золотая жила для провинциальной рекламы. Раньше рисовали плакаты со звёздами на ларьках, а теперь можно делать дипфейки :)

#deepfake #neuralcringe

Господин Musk на очереди. (Не Путиным единым же)

А пока расскажу немного про дипфейки.

В чём залог качественного дипфейка? Именно качественного, а не успешного. Успешным может стать и азаза на 10 секунд, сделанный в мобильном приложении и набравший несколько миллионов просмотров. Так вот, для качественного дипфейка необходимо:

1. Материал хорошего качества, будь то исходные видео, где мы меняем лица (DST), так и источники, откуда мы берём лица для замены (SRC)

2. Содержимое. Сет лиц (SRC) должен покрывать все, или хотя бы большинство эмоций, мимики, поворотов глаз, наклонов головы, теней и зубов на лице в исходном видео (DST). Что бы собрать такой сет, иногда требуется несколько дней. Это поиск и отсмотр материала, например, фильмов, нарезание этих фильмов на кусочки с нужными нам лицами, извлечение, сортировка (благо не вручную) Если потребуется, то ещё и апскейл. Тут всё зависит от вашего желания и терпения :)

3. Модель. Самое главное. Сердце дипфейка. Модели могут быть разными и под разные задачи. Можно использовать уже готовые, либо сделать свою собственную. Не буду вдаваться в подробности, опишу просто - чем крупнее план (например, лицо на весь экран в определённой сцене в разрешении 1080р) тем "мощнее" потребуется модель, с большим разрешением, настройками детализации и прочим. И чем жирнее модель, тем сильнее требования к оборудованию, на котором будет происходить обучение.

#deepfake #longread

4. Оборудование. Требования простые: наличие ядер CUDA и VRAM. Всё просто - чем больше, тем лучше :) Тут, к сожалению, только Nvidia. (Можно, конечно, найти старые версии софта под openCL и запустить на AMD или даже на CPU, но это такое себе удовольствие. В 40-100 раз медленнее + ограниченный функционал)

Вы так же не сможете запустить модель, которая сделана под 16Гб видеопамяти на 8Гб видеокарте. От количества видеопамяти зависит какие настройки (детализации) и разрешение вы сможете "запихать" в вашу модель.

Для примера, я делал только предобучение модели с разрешением 448 (вот эти два скриншота с Маском, которые я запостил выше) целый месяц. Предобучение это, собственно, скармливание модели набора из тысяч разых лиц, что бы в дальнейшем, уже при обучении, модель могла распознавать те или иные черты лица быстрее. И само обучение уже непосредственно лица Илона Маска займёт столько же. И всё это на nVidia Tesla V100 SXM2 16Gb. Про видяхи, в общем, тема достойная отдельного поста. Так что если у вас завалялась парочка 3090, то присылайте их мне, то вы можете обучать крутые модели. Но даже если у вас 1060 6Gb, то всё равно можете ;)

#deepfake #longread

Ой, что-то много букв получилось. Про архитектуры и, наверное, видеоредакторы напишу в следущих постах.

Так вот, если у вас есть: время, тепрение, крутые идеи, вам не жалко вашу GTX/RTX, вам не хочется майнить эфир, а хочется жечь электричество просто так, вам хочется страдать, разбираясь в том, как это, блять, работает, не получая ничего взамен, то добро пожаловать :D

github | уютный discord

Deep Dream

Тренировать модель для дипфейка месяцы? Нет!

Анимировать фотку за 1 клик? Ну конечно! Вчера завирусился сервис. Развлекайтесь :D

"22-й век"

Билли очень здорово получилась!
Тикток автора.

#deepfake

Господа, завтра новый ролик. И он будет абсолютно проклятым :) Кто узнал откуда это - ставьте свечки.

Это пока ещё не оно, но тоже проклятое :) Анжелина Джоли и Бред Питт на работе в московском МФЦ

#neuralcringe #deepfake

Я же обещал что будет проклято 😎 Пожалуйста.

Полное видео на ютубе

#deepfake

Сегодня тестировал upscale (enhance) т.е., грубо говоря, улучшение изображения. В свободном и бесплатном доступе не так много действительно хороших программ/нейронок для улучшения. Topaz Gigapixel для ПК или Remini для смартфона, например. И результат они выдают порою совсем не такой, как ты этого ожидаешь. Тут тоже зависит от исходного изображения. Нейросеть хоть и может творить чудеса, но в большинстве случаев получается полная шляпа. С артефактами.