Контент-заводик (почти) бесплатно

Не знаю, как у вас, но за последний год я слышал фразу «контент-завод» раз в пять чаще, чем «пакет брать будете?». Еще чаще встречается «научу вас делать контент-завод, который принесет миллионы...», что только добавляет теме пикантности. 😂

Мое мнение неизменно - создать алгоритм для полностью автономной генерации вирального контента без участия человека пока нельзя. Но кто нам запретит баловаться в этом направлении?

1. Выбор контента
Очевидно, подойдет не всё. Сразу вычеркиваем консистентных персонажей (я от них устал), сложные раскадровки (они устали от меня) и диалоги (дорого и сложно). Идеальный вариант — сторителлинг. В качестве референса взял канал https://www.tiktok.com/@porog_project - таинственно, свежо, с охватами. Берем.

2. Выбор инструментов
Жадность нашептала поднять всё на Open Source, но есть нюансы - локальные LLM не вывозят интересные сценарии. В итоге собрал в ComfyUI:

Gemini залетает в ноду (сценарий стоит меньше цента);
Qwen — для голоса;
LTX — для анимации.

Схему приложу в комментах. Получилось долго, грязно и иногда с OOM — господа, это ComfyUI, по-другому быть не может. Пользоваться просто - вставил API-ключ Google, нажал кнопку и ушел варить пельмени или медитировать на весеннюю погоду. Когда-нибудь оно досчитает, и ты получишь 1.5 минуты видео.

Путь второй — собрать всё на сторонних API. Быстрее, чище и вкуснее. Реализовал это в Weavy.ai, переработав схему из Comfy. Чтобы не задохнуться от жадности, оптимизировал воркфлоу так, чтобы он влезал в триальные 150 баллов. На выходе — 45 секунд видео. Себестоимость одной «крутки» — ~122 рубля (примерно твой гонорар за 5 минут генеративного видео, не считая сока).

Выводы
Выводов не будет. Мне было весело это собирать. Продолжать вряд ли буду, поэтому делюсь наработками.

P.S. В комментариях очень жду экспертов, заработавших 50 биткоинов в секунду на контент-заводах пассивно, удаленно и без регистрации.

P.S.S. Ребятки, дайте максимально много реакций. Сейчас это очень нужно

Влад подсказал, что у lipdub.ai появилась бесплатная модель и 14-дневный триал. Для тех, кто не в теме: lipdub.ai — это липсинк-сервис, который раньше считался лучшим по качеству, но был доступен только после личной беседы с представителем компании и стоил как крыло самолёта. Конкуренция в лице Heygen и Sync.so сделала своё дело — условия внезапно стали человеческими.

Попробовал. Не впечатлило:

Логика работы. Сервису нужно минимум 30 секунд непрерывного видео для обучения модели — и именно этот кусок он будет липсинкать. При средней длине шота 3 секунды найти такой фрагмент — уже квест. Про AI-генерации с говорящей головой на 30 секунд вообще молчу.

Скорость. Обучение модели занимает до 3 часов. Идеальное время, чтобы сочинить убедительную причину, почему дедлайн сорван.

Триал. Выдаётся только после привязки карты. Если попытаетесь зарегистрировать второй аккаунт с той же картой — триал не получите, но карта привяжется. Потому что почему бы и нет.

По качеству — смотрите сами: первое видео premium, второе free.

P.S. Считаю что вопрос с липсинком на русском языке по-прежнему открыт.
❤️ - да
🍓 - нет

Узнаем что о вас думают коллеги на созвонах.

Очень интересные модельки выпустили hume.ai. Теперь мы можем узнать по голосу, картинке, тексту или видео какую эмоцию испытывает человек.

Попробовать можно тут https://app.hume.ai/playground/file (бесплатно - это сообщение для Владимира)

Незаменимая вещь, если заказчику нужно доказать что девушка на экране испугалась, а не просто рот открыла.
Можно проверять как на файлах, так пустить трансляцию через вебку (или OBS) и наблюдай за реакцией коллег, а можно просто скопировать переписку, и выяснить кто действительно абьюзер 😊😊😊.

У меня все. Спасибо😊