дAI потестить!
2.65K subscribers
246 photos
168 videos
4 files
159 links
Ленивые AI инструменты для создания контента
👉 Тут помогут и подскажут @neuralchatik
Download Telegram
Продолжаем. Начало тут
Однокнопочный липсинк. Ожидать качества пока не стоит, но на определенной крупности может спасти от повторной съемки. Мои заключения в следующем посте. Исходники как обычно в комментах👇👇👇
#lipsync
2🔥1
дAI потестить!
Продолжаем. Начало тут Однокнопочный липсинк. Ожидать качества пока не стоит, но на определенной крупности может спасти от повторной съемки. Мои заключения в следующем посте. Исходники как обычно в комментах👇👇👇 #lipsync
Липсинк одной кнопкой. Топ по качеству сверху вниз

MuseTalk
+ Пока топ среди простейших
+ Нет мерцаний
- Есть каша в зубах
- Немного пожал качество видео на выходе
Github: https://github.com/TMElyralab/MuseTalk
Colab: https://huggingface.co/spaces/anhhayghen/dopgiongnoi
Demo: https://colab.research.google.com/github/camenduru/MuseTalk-jupyter/blob/main/MuseTalk_jupyter.ipynb

Easy Wav2Lip (Он же в FaceFusion)
+ Самый популярный среди простейших
+ Хороший результат на умеренной крупности
- Может говорить в паузах
- Каша в зубах
- Иногда мерцает (лечится дефликкером)
- Иногда есть дрожание (лечится понижением fps видео)
- Иногда неконсистентно (никак не лечится :-))
Github: https://github.com/anothermartz/Easy-Wav2Lip
Colab: https://colab.research.google.com/github/anothermartz/Easy-Wav2Lip/blob/v8.3/Easy_Wav2Lip_v8.3.ipynb
Demo: https://huggingface.co/spaces/manavisrani07/gradio-lipsync-wav2lip

Video-retalking
- Каша в зубах
- Зашакалил видео
- Есть проблемы с артикуляцией
- Есть мерцание
Github: https://github.com/vinthony/video-retalking
Colab: https://colab.research.google.com/github/vinthony/video-retalking/blob/main/quick_demo.ipynb
Demo: https://huggingface.co/spaces/fffiloni/VideoRetalking

SadTalker-Video
- Каша в зубах
- Есть проблемы с артикуляцией
- Зашакалил видео
- Изменил лицо (глаза)
- Добавил второй подбородок
Github: https://github.com/gauravk95/SadTalker-Video
Colab: https://colab.research.google.com/github/gauravk95/SadTalker-Video/blob/master/sad_talker_video_colab.ipynb
Demo: https://replicate.com/gauravk95/sadtalker-video?prediction=sgc5nb0ka5rgp0cg80nrv9chag

С этими у меня отношения не сложились 👇

DINet (для своего видео нужны заморочки с OpenFace, не удобно)
Github: https://github.com/MRzzm/DINet
Colab: https://colab.research.google.com/github/zachysaur/Dinet-openface-1/blob/main/DINet.ipynb#scrollTo=uiPXsOUv40jr

Lipsick (почему то перестал работать, лезть в код лень)
Github: https://github.com/Inferencer/LipSick
Colab: https://github.com/Inferencer/LipSick/tree/Google-Collab?tab=readme-ov-file

Для последних двух тесты прикрепил в коммнеты👇. Для остальных - примеры постом выше👆
#lipsync
👍6
Сделали списочек бесплатных LLM в нашем ламповом чатике 👇
#LLM
Переодеваем друзяшку в нужную нам одежду.
IDM-VTON
+ Есть автомаскирование одежды на жертве (можно допилить руками - выключить Use auto-generated mask)
+ Может взять образец одежды с другого человека (не нужна картинка на белом фоне)
+ Одежда выделяется путем ввода промпта
- Плохо копирует одежду
- Не может повторить узоры и слова на одежде
- Кушает много Vram (20gb)
- Если на картинке с одеждой больше одного элемента, может запутаться
Github: https://github.com/yisol/IDM-VTON
Colab: https://colab.research.google.com/github/camenduru/IDM-VTON-jupyter/blob/main/IDM_VTON_jupyter.ipynb (Pro Colab) 20GB VRAM
Lightning: https://lightning.ai/camenduru/studios/idm-vton-jupyter
Demo: https://huggingface.co/spaces/kadirnar/IDM-VTON

OOTDiffusion
+ Может справится с текстом и узором, но такое
+ Автомаскирование но без возможности доработки
- Лучше использовать моделей с однотонным задником
- Меняет пропорции выходной картинки (на вход нужно подавать 768x1024)
- изменяет лицо, тело человека, татуировки на теле
- Требует 15GB Vram
- не может копировать одежду с людей
Github: https://github.com/levihsu/OOTDiffusion
Colab: https://colab.research.google.com/github/camenduru/OOTDiffusion-jupyter/blob/main/OOTDiffusion_gradio_jupyter.ipynb
ComfyUI: https://github.com/AuroBit/ComfyUI-OOTDiffusion
Demo: https://huggingface.co/spaces/levihsu/OOTDiffusion

AnyDoor
- Ручная маскировка и жертвы и одежды
- Маленькое разрешение (виден переход)
- Плохо копирует одежду
- Артефакты
Github: https://github.com/ali-vilab/AnyDoor
Colab: https://colab.research.google.com/github/camenduru/AnyDoor-colab/blob/main/AnyDoor_colab.ipynb
Demo: https://replicate.com/ali-vilab/anydoor
Demo: https://huggingface.co/spaces/xichenhku/AnyDoor-online

P.S. Есть еще такая штука
OutfitAnyone
Github: https://github.com/HumanAIGC/OutfitAnyone
Demo: https://huggingface.co/spaces/HumanAIGC/OutfitAnyone
Демо перестало работать, бумаги нет как и кода на гите.

P.P.S. Разговаривал с человеком торгующем одеждой на маркетплейсе. Говорит - в этих сервисах при генерации не учитывается много нюансов: посадка, реальный размер, фактура ткани и т.д. Отказываться от аналоговых девушек и фотосессий с живым фотографом пока не готов.
Исходники и остальное в комментах
Следующий пост про сервисы за копеечку 👇👇
#change_clothes
🔥4
дAI потестить!
Переодеваем друзяшку в нужную нам одежду. IDM-VTON + Есть автомаскирование одежды на жертве (можно допилить руками - выключить Use auto-generated mask) + Может взять образец одежды с другого человека (не нужна картинка на белом фоне) + Одежда выделяется путем…
Продолжаем переодевать друзяшек. Сегодня за монеты. "Любой ценой но бесплатно"
Список сервисов:

https://app.superlook.ai/login
+ Реалистично генерирует одежду
+ Можно тапать монетки во время генерации 😄😄(привет хомякам)
- Нельзя примерить свою одежду (только промпт)
- Есть ватермарка в бесплатном тарифе. См. видео 👆 как обойти
- Через несколько генераций попросят денег (поможет https://www.emailnator.com/)

https://www.stylar.ai/tools/change-clothes-ai
- Очень напоминает Img2img в WebUI Automatic1111
- Нельзя примерить свою одежду
- Плохо слушается промпта
- Есть ватермарка в бесплатном тарифе
- Через несколько генераций попросят денег (поможет https://www.emailnator.com/)

https://heybeauty.ai/try-on
+ Есть экстеншн в хром https://heybeauty.ai/extension. Примерь на себя одежду с сайта в браузере
- Дают бесплатных 10 генераций
- Это IDM-VTON за деньги (зачем платить если тут https://t.me/dAIpotestit/58 бесплатно)

В комментах исходники и немножко Ивлеевой.
#change_clothes
🔥3👍2
Несколько человек написало в ЛС, Не думал что это проблема:

Удаляем watermark с изображения
https://www.watermarkremover.io/ru - дает 3 бесплатные загрузки
https://dewatermark.ai/ru - на бесплатном тарифе не даст скачать в HiRes
https://clipdrop.co/text-remover - удалит только текст, на бесплатном тарифе сожмет результат
ВФ для ComfyUI https://openart.ai/workflows/yewes/remove-text-or-watermark/0Sh3rbZ8kPmBvUPiqVew - только текст

У меня есть подозрение, если есть ватермарка, то это не просто так
#tips
1
дAI потестить!
Продолжаем переодевать друзяшек. Сегодня за монеты. "Любой ценой но бесплатно" Список сервисов: https://app.superlook.ai/login + Реалистично генерирует одежду + Можно тапать монетки во время генерации 😄😄(привет хомякам) - Нельзя примерить свою одежду (только…
Нашелся еще один переодеватель https://www.capcut.com/editor-graphic. Отлично копирует одежду, хорошо переносит текст, бесплатный и без водных знаков (это вообще законно?). Из минусов - модели только дефолтные.
P.S. Зачем то заправила худи в джинсы, хотя что я понимаю в моде...
#change_clothes
❤‍🔥1👍1🤣1