Контент-заводик (почти) бесплатно

Не знаю, как у вас, но за последний год я слышал фразу «контент-завод» раз в пять чаще, чем «пакет брать будете?». Еще чаще встречается «научу вас делать контент-завод, который принесет миллионы...», что только добавляет теме пикантности. 😂

Мое мнение неизменно - создать алгоритм для полностью автономной генерации вирального контента без участия человека пока нельзя. Но кто нам запретит баловаться в этом направлении?

1. Выбор контента
Очевидно, подойдет не всё. Сразу вычеркиваем консистентных персонажей (я от них устал), сложные раскадровки (они устали от меня) и диалоги (дорого и сложно). Идеальный вариант — сторителлинг. В качестве референса взял канал https://www.tiktok.com/@porog_project - таинственно, свежо, с охватами. Берем.

2. Выбор инструментов
Жадность нашептала поднять всё на Open Source, но есть нюансы - локальные LLM не вывозят интересные сценарии. В итоге собрал в ComfyUI:

Gemini залетает в ноду (сценарий стоит меньше цента);
Qwen — для голоса;
LTX — для анимации.

Схему приложу в комментах. Получилось долго, грязно и иногда с OOM — господа, это ComfyUI, по-другому быть не может. Пользоваться просто - вставил API-ключ Google, нажал кнопку и ушел варить пельмени или медитировать на весеннюю погоду. Когда-нибудь оно досчитает, и ты получишь 1.5 минуты видео.

Путь второй — собрать всё на сторонних API. Быстрее, чище и вкуснее. Реализовал это в Weavy.ai, переработав схему из Comfy. Чтобы не задохнуться от жадности, оптимизировал воркфлоу так, чтобы он влезал в триальные 150 баллов. На выходе — 45 секунд видео. Себестоимость одной «крутки» — ~122 рубля (примерно твой гонорар за 5 минут генеративного видео, не считая сока).

Выводы
Выводов не будет. Мне было весело это собирать. Продолжать вряд ли буду, поэтому делюсь наработками.

P.S. В комментариях очень жду экспертов, заработавших 50 биткоинов в секунду на контент-заводах пассивно, удаленно и без регистрации.

P.S.S. Ребятки, дайте максимально много реакций. Сейчас это очень нужно

Влад подсказал, что у lipdub.ai появилась бесплатная модель и 14-дневный триал. Для тех, кто не в теме: lipdub.ai — это липсинк-сервис, который раньше считался лучшим по качеству, но был доступен только после личной беседы с представителем компании и стоил как крыло самолёта. Конкуренция в лице Heygen и Sync.so сделала своё дело — условия внезапно стали человеческими.

Попробовал. Не впечатлило:

Логика работы. Сервису нужно минимум 30 секунд непрерывного видео для обучения модели — и именно этот кусок он будет липсинкать. При средней длине шота 3 секунды найти такой фрагмент — уже квест. Про AI-генерации с говорящей головой на 30 секунд вообще молчу.

Скорость. Обучение модели занимает до 3 часов. Идеальное время, чтобы сочинить убедительную причину, почему дедлайн сорван.

Триал. Выдаётся только после привязки карты. Если попытаетесь зарегистрировать второй аккаунт с той же картой — триал не получите, но карта привяжется. Потому что почему бы и нет.

По качеству — смотрите сами: первое видео premium, второе free.

P.S. Считаю что вопрос с липсинком на русском языке по-прежнему открыт.
❤️ - да
🍓 - нет

Узнаем что о вас думают коллеги на созвонах.

Очень интересные модельки выпустили hume.ai. Теперь мы можем узнать по голосу, картинке, тексту или видео какую эмоцию испытывает человек.

Попробовать можно тут https://app.hume.ai/playground/file (бесплатно - это сообщение для Владимира)

Незаменимая вещь, если заказчику нужно доказать что девушка на экране испугалась, а не просто рот открыла.
Можно проверять как на файлах, так пустить трансляцию через вебку (или OBS) и наблюдай за реакцией коллег, а можно просто скопировать переписку, и выяснить кто действительно абьюзер 😊😊😊.

У меня все. Спасибо😊

Делаем рекламу за 5 минут на вайбе

Поскольку за последний месяц я очень глубоко погрузился в LLM-модели, решил попробовать сделать небольшой рекламный ролик без участия своих рук. Идея проста — дать на вход LLM всё, что у меня есть по продукту, и отправить её монтировать через API в какой-нибудь сервис.

Суть простая — скормить модели всё, что есть по продукту, и отправить её собирать видео через API.

Что сделал:
Взял свой проект — @EatDiary_roBot (подсчёт калорий по фото + дневник питания)
Снял короткое видео добавления еды
Дал LLM: видео, скрины и ссылку на репозиторий
Попросил сгенерировать инструкции (да, я их не читал 😄)
Прогнал через Claude, ChatGPT и Gemini — ради интереса
Для монтажа использовал remotion.dev (бесплатно и достаточно удобно)

Как повторить:
Берёшь инструкции (скину в комменты)
Добавляешь свои материалы (видео/скрины)
Открываешь IDE
Даёшь промпт вроде:
«Используя инструкции и материалы, сделай промо-ролик приложения»

Дальше разберётесь 🙂

P.S. Во вложении ролики от ChatGPT, Claude и Gemini. Видео смог корректно вставить только первый. В целом подход рабочий - если немного допилить инструкции.
P.S.S. Сейчас посмотрел логи, возможно LLM скрины не съела. Но я уверен у вас лучше получится, удачи
P.P.S.S. Поскольку мы тут все в тг на супер нелегальном положении, приятно под постом увидеть 🍌

Немного о цензуре лиц в Seedance 2.0

Недавно ночью с Дмитрием Тихоновым сидели и обсуждали, по какой причине на его аватар не срабатывает цензура в Seedance 2.0. И я скажу так, у нас есть приятные известия.

На данный момент известно 2 способа обхода цензуры лиц: накидать шума и нарисовать сетку на лице.
А что если я скажу, что совсем не обязательно работать со всей картинкой, а достаточно только поработать с двумя маленькими участками. Эти 2 участка - глаза (см скрин 1).

Что точно работает:
Надеть очки на персонажа (скрин 2)
Закрасить эти участки заливкой (достаточно всего 😂😂 90 процентов прозрачности) (скрин 1)
Замазать эти участки шумом (скрин 3)
Перенести глаза в другое место (скрин 4)
И специальный способ от Дмитрия - сделать гримасу (скрин 5)

Естественно в промпте прописать, чтобы наложенные нами артефакты были удалены с персонажа.

Тестировал все в европейской dreamina.

P.S. В комментах жду варианты, как еще хитрее можно спрятать глаза от злобного Seedance.
P.S.S. У Дмитрия есть маленький ламповый канал с нейроназванием http://t.me/niishtyaki 😊😊.