#стабильнаядиффузия #stablediffusion

📌 Генерация видео с помощью Стабильной диффузии

Часть 1

Часть 1 | Часть 2 | Часть 3

В этом посте я расскажу, что нужно для генерации, откуда это скачать и что посмотреть, чтобы это правильно установить.

Шаг 1. Устанавливаем КомфиЮАй

КомфиЮАй (англ. ComfyUi) — это альтернативный интерфейс для работы со Стабильной Диффузией. Удобен тем, что пользователь может наглядно увидеть процесс генерации изображений и с помощью специальных модулей, узлов и нодов, и вносить изменения на каждом этапе.

Из плюсов можно выделить простоту установки, быстроту работы, немного меньшие технические требования к компьютеру, чем у Автоматик1111, и быстроту загрузки тяжеловесных моделей.

Как установить КомфиЮАй смотрим здесь с 11:45. Для полноты картины рекомендую посмотреть данное видео полностью.

Шаг 2. Скачиваем модели для СД

Я рекомендую скачать вам две модели:

🔹 SD-XL 1.0-base Model (необходимо скачать файл sd_xl_base_1.0.safetensors, который находится в самом низу списка). Данная модель нужна для генерации изображений.

🔹 Stable Video Diffusion Image-to-Video Model Card (необходимо скачать файл svd_xt_image_decoder.safetensors). Данная модель преобразует изображение в видео. Эта модель была обучена генерировать 25 кадров с разрешением 576x1024.

Скачанные файлы перемещаем в папку \ComfyUI\ComfyUI\models\checkpoints

Шаг 3. Устанавливаем КомфиЮАй менеджер

Менеджер необходим для установки кастомных нодов и доустановки нодов для скачанных проектов из интернета.

Менеджер находится по следующей ссылке: https://github.com/ltdrdata/ComfyUI-Manager

Перед его установкой необходимо установить Git gitforwindows.org Если Гит у вас уже установлен, то пропускаем этот шаг

Переходим в папку C:\ComfyUI\ComfyUI\custom_nodes

Жмем правой кнопкой мышки внутри папки и выбираем пункт Git Bush Here

В открывшемся окне вводим команду «git clone https://github.com/ltdrdata/ComfyUI-Manager.git» и нажимаем энтер. Начнется скачивание расширения. По окончании процесса в папке появится новая папка с именем ComfyUI-Manager. Это значит, что все прошло успешно.

Более наглядно про менеджер смотрим вот это видео.

Менеджер на первых порах может и не пригодиться, но лучше его установить сразу.

—» Супермикросток.ру —» Подписаться на канал

Продолжение завтра...

#стабильнаядиффузия #stablediffusion

📌 Генерация видео с помощью Стабильной диффузии

Часть 2

Часть 1 | Часть 2 | Часть 3

Если вы сделали, что указано в первой части, то у вас уже должен быть настроен КомфиЮАй с Менеджером нодов и скачаны две модели. Поэтому переходим дальше.

Шаг 4. Загружаем рабочий процесс в КомфиЮАй

Переходим на страничку и сохраняем себе на жесткий диск два представленных изображения. Рабочие процессы вшиты внутрь этих файлов. Вместо них можно скачать файлы в формате Json. Ссылки на них есть под каждым изображением.

Таким образом у вас на компьютере должно быть два файла с двумя рабочими процессами:

🔹 workflow_image_to_video — генерация видео из изображения
🔹 workflow_txt_to_img_to_video — генерация изображения из текста, а затем из изображения в видео

Теперь самое интересное. Запустив КомфиЮАй и дождавшись пока все загрузится. Мы просто перетаскиваем на рабочее пространство один из файлов и начинаем генерировать.

Шаг 5. Генерируем видео

Я буду рассматривать генерацию только через процесс под названием image_to_video. Т.к. у меня есть много изображений из мидджорни и интересно посмотреть, как генерация видео сработает на них.

🔷 Image to Video

1️⃣ В узле под названием "Image Only Checkpoint Loader (img2vid model)" указываем модель "svd_xt_image_decoder.safetensors".

2️⃣ В узле "Load image" указываем изображение, которое будем оживлять. Можно простым перетаскиванием закидывать картинки.

3️⃣ В узле "SVD_img2vid_Conditioning" значение переменной "video_frames" устанавливаем на 25. Т.к. модель, скачанная в первой части предназначена для генерации 25 кадров. Остальные настройки в данном узле лучше оставить по умолчанию.

Для генерации нажимаем Queue Prompt и ждем некоторое время. На выходе мы получаем файл в формате webp. С ним то мы и продолжим работать завтра.

—» Супермикросток.ру —» Подписаться на канал

В модель я загружаю вот этот файл.

Получившееся видео. Основная проблема на данном этапе, это то, что видео получается в размере 1024 на 576 и они очень короткие по времени. С этим мы разберемся на следующих этапах.

#стабильнаядиффузия #stablediffusion

📌 Генерация видео с помощью Стабильной диффузии

Часть 3

Часть 1 | Часть 2 | Часть 3

Шаг 6. Конвертация webp в mp4

Чтобы сконвертировать файлы из webp в mp4, я использую программу Adobe Media Encoder. Она удобна тем, что можно сразу закинуть много файлов и перевести их из одного формата в другой. В настройках я ничего не меняю, разрешение файла оставляю как и у оригинала.

Шаг 7. Увеличиваем разрешение видео и его продолжительность.

Чтобы увеличить разрешение видео, нам понадобится ПО, работа которого основана на ИИ и машинном обучении. Я пользуюсь Topaz Video Enhance AI. Но я также знаю, что для этого можно использовать Adobe After Effects и DaVinci Resolve, но вам необходимо будет установить дополнительные плагины. Я с ними знаком лишь поверхностно, поэтому трогать не буду.

🔷 Topaz Video Enhance AI

1️⃣ Импортируем видео. Простым перетаскиванием переносим видео в программу и начинаем с ним работать.
2️⃣ Выбираем новое разрешение для видео. В поле Resolution можно выбрать либо 2х Upscale либо 4х Upscale.
3️⃣ Увеличиваем кадровую частоту. Изначально, Стабильная Диффузия выдает дерганную картинку, чтобы ее как-то сгладить я выбираю либо 25 кадров (чаще всего) либо 60 кадров в секунду. Чем больше кадровая частота, тем более плавным будет видео, но и его генерация будет происходить дольше.
4️⃣ Выбор модели генерации. Я использую либо Proteus, либо Gaia. Выбор модели зависит от того, что изображено на видео. Более подробно описание каждой модели можно найти в интернете.
5️⃣ Увеличиваем продолжительность. Чтобы увеличить продолжительность я использую эффект slow motion 6х с моделью Chronos Fast.

Проделав все вышеописанное, мы превращаем дерганное видео из СД во что-то более менее пригодное для использования.

Чтобы познакомиться с Топазом чуть ближе, рекомендую посмотреть вот это видео.

По Топазу что хочется сказать. Использование этой программы — это целое искусство. Чтобы подобрать корректно модель и другие параметры, можно потратить не один час.

—» Супермикросток.ру —» Подписаться на канал

#стабильнаядиффузия #stablediffusion

📌 Генерация видео с помощью Стабильной диффузии

Вместо заключения

Как видите, самостоятельная генерация видео с помощью СД дело не такое простое как кажется. Именно поэтому в мире появляется все больше и больше платных сервисов, которые избавляют пользователей от головной боли и берут техническую часть на себя.

Но если у вас есть желание разобраться в теме и попробовать погенерировать самостоятельно, то вся информация доступна в постах выше, да и в интернете можно найти много полезного. Так что дерзайте!

Если оценивать качество генераций, то у разработчиков есть куда стремиться. Хотя если вспомнить, что представляли из себя генеративные модели для изображений на первых порах, то сегодняшние результаты по видео, выглядят в целом неплохо.

П.С. Прикрепленное видео — это то, что у нас получилось.

—» Супермикросток.ру —» Подписаться на канал

#фрипик #freepik

📌 Фрипик монетизирует свою базу, продавая доступ к изображениям для тех гигантов

Недавно писал что у Шаттерстока договора на поставку данных для тех гигантов, но оказывается данными приторговывает и Фрипик. Микросток продает доступ к данным по цене от 2 до 4 центов за изображение.

Речь идет о медиа-контенте, который используется для обучения моделей ИИ.

Надеемся, что авторам тоже из этого что-нибудь припадет.

—» Супермикросток.ру —» Подписаться на канал

Алло, мы ищем художников! 📞

Приглашаем поучаствовать в нашем Open-call Летняя СМЕНА! Если вы художник, иллюстратор, фотограф или дизайнер — присылайте свои произведения и, возможно, именно они украсят территорию Хлебозавода этим летом.

Условия участия:

• Мы ждем произведения независимых художников, работающих в разных жанрах и техниках. Присылайте серию работ (минимум 18 произведений), чтобы мы показали их в формате вашей персональной выставки!
• Мы принимаем все, что может быть напечатано или смонтировано на наших уличных выставочных конструкциях – графику, иллюстрации, принты, фотографии. С вас — файлы в высоком разрешении, с нас — печать и оформление работ в формате А1, а также информационная поддержка выставки.
• Будет плюсом, если работы будут созвучны концепции, атмосфере или истории Хлебозавода.
• Мы не принимаем видео, объекты и любые другие работы инсталляционного характера.

Из всех заявок наша команда отберет три проекта, которые будут поочередно выставлены на нашей территории вместе с информацией об авторе. Выставочный сезон продлится все лето.

🔺Заявку можно отправить на адрес art@hlebozavod9.ru до 31 мая включительно.

Список участников, прошедших конкурс, будет опубликован на нашем сайте и в соцсетях в июне.

С нетерпением ждем ваших заявок и ваших проектов на нашей Летней СМЕНЕ!

📌 Фотографии в обмен на подписки в соц сетях

Недавно наткнулся в интернете на проект, который позволяет скачивать бесплатно фотографии и другой контент в обмен на подписку на социальные сети автора.

https://www.tiltsnap.com

На первый взгляд схема кажется потрясающей. Чем больше скачивается фотографий, тем больше подписчиков получает автор. Ну и в последствии автор уже монетизирует эту аудиторию.

Но что будет в реальности? Будут ли подписываться? Не будут ли забывать зачем подписались на этого человека и отписываться? Что делать если будут подписываться люди из разных регионов мира? Как в этом случае монетизироваться?

Что думаете насчет подобной схемы работы? Стали бы загружать свои работы на подобную платформу? Давайте немного порассуждаем.

—» Супермикросток.ру —» Подписаться на канал

Буду здесь дублировать новые посты из моего инстаграма.
Кстати, не забудьте подписаться и там
⬇️

https://www.instagram.com/tanya_kopt

Работа фотографа с фотобанками может приносить существенные денежные бонусы.
И тут я не только про обычные продажи работ.

Например, у AdobeStock есть уже ежегодная программа, когда они берут у вас в аренду на 1 год работы для бесплатной коллекции.

Они изымают работы из портфеля на 1 год. А потом возвращают.
За каждую работу платят единоразово 5$.

В рилсе пара скринов сумм, заработанных в прошлый год.

‼️Номинированные работы возьмут НЕ ВСЕ.


В комментах поделитесь какое количество работ у вас номинировали❓

#запрос

📌 Фотографии со звездами сцены, политиками и общественными деятелями

Друзья, есть определенный запрос со стороны российских клиентов на контент со звездами эстрады, политическими и общественными деятелями.

Не раз получал подобные запросы с просьбами помочь найти снимки на эти темы. Ввиду того, что у меня подобного материала нет, переадресую его сюда.

Если у вас есть где-нибудь в архивах снимки на эту тему, то не стесняйтесь и прогружайте их на наши стоки. На Лори в разделе «Знаменитости» всего 82 000 снимков. Озеро в этом плане совсем пустой.

Клиенты на эту тему идут из: ТГ каналов, специализированных сайтов, фан-клубов, региональных медиа (у федеральных каналов с этим легче, они могут пойти на пресс-конференцию и самостоятельно сфотографировать кто им нужен) и др.

—» Супермикросток.ру —» Подписаться на канал

На днях отрубился мой любимый ВПН, которым я пользовался несколько лет. В итоге пришлось поднять свой персональный сервер в Турции и заходить через него на залоченные сайты. Стоимость услуги около 500 рублей в месяц. Можно оплатить нашими картами. Дают персональный IP. Не знаю насколько хватит, но пока работает. Если вдруг кому-нибудь будет нужна подобная услуга, то обращайтесь в личку. Скину ссылку на сервис.

—» Супермикросток.ру —» Подписаться на канал

EyeEm прислал выплаты за обучение ИИ на работах своих авторов. "We are pleased to inform you that a selection of your commercial images from your EyeEm Market Portfolio has been licensed for use in training machine learning models."

📌 Креативные индустрии в России

Недавно наткнулся на интересный документ под названием «Атлас Креативных кластеров РФ». В нем собрана информация о различных креативных пространствах по всей России.

Сейчас, креативные индустрии стремительно развиваются не только в мире, но и в России. Государства видят в этих сферах большой потенциал как для экономического роста, так и для вовлечения людей в новые виды деятельности. Это довольно необычно, так как традиционно внимание уделялось другим профессиям. Видимо, здесь мы наблюдаем определенные тектонические сдвиги.

На первых порах предпринимаемые меры могут быть не заметны, но они уже происходят: принимаются необходимые законодательные акты, создаются образовательные программы в университетах и т.д.

В общем к чему все это? Нам, как непосредственным участникам и представителям креативных индустрий, будет полезно познакомиться с уже существующими пространствами. Где-то можно выставлять свои проекты, где-то можно продавать собственный мерч, где-то можно выступить с концертом или лекцией и проч. Для нас открываются дополнительные возможности как по продвижению собственного бренда, так и укреплению репутации.

—» Супермикросток.ру —» Подписаться на канал

#шаттерсток #shutterstock

📌 Шаттерсток сделал выплаты за участие портфолио в обучении ИИ

В этот раз пришла сумма не такая большая как в предыдущий раз, но и на этом спасибо.

—» Супермикросток.ру —» Подписаться на канал

#шаттерсток #shutterstock

📌 Отправка контента: транспортные средства

Часть 1

Микросток Шаттерсток имеет определенные правила, которые касаются изображений с транспортными средствами, все они предназначены для уважения владельцев интеллектуальной собственности и гарантируют, что клиенты могут доверять целостности коллекции Шаттерстока.

🔹 Самолеты — разрешаются фотографии на которых невозможно идентифицировать модель самолета.

Фотографии на которых есть узнаваемые модели самолетов или символы авиа перевозчика могут быть лицензированы только для редакционного использования. Например Британский Конкорд — фотографии и иллюстрации разрешены только для редакционного использования.

Иллюстрации и 3Д модели изолированных самолетов приемлемы, если они не имеют близкого сходства с реальными проектами, защищенными авторскими правами.

🔹 Лодки / корабли — фотографии, иллюстрации и трехмерные визуализации лодок, яхт и кораблей, независимо от того, изолированы ли они на белом фоне или находятся в естественной среде, приемлемы для коммерческого использования, если конструкция судна является общей, лодочные метки не видны, и производитель или бренд не могут быть идентифицированы.

Фотографии с судами судоходной компании Карнивал Круиз Лайн неприемлемы для коммерческого использования, только для редакционного использования.

Весельные корабли типа Миссисипи и Дельта Квин защищены авторскими правами и не допускаются к продаже по коммерческой лицензии, только по редакционной.

🔹 Автомобили — изображения крупным планом не идентифицируемых частей автомобиля приемлемы для коммерческого использования.

Изолированные фотографии автомобилей, на белом фоне или на фоне окружающей среды недопустимы для коммерческого использования. Данные типы изображений нужно загружать как редакционные. Даже если снимок сделан в студийных условиях или был специально выставлен на природе, то его все равно загружаем как редакционное.

Изображения военных автомобилей изолированных на белом фоне недопустимы, однако они могут быть проданы по коммерческой лицензии если они являются частью большой сцены и при этом автомобили не содержат узнаваемых логотипов или военных опознавательных знаков.

Изображения с лондонскими такси LTI допустимы только для редакционного использования.

Шаттерсток принимает иллюстрации и 3Д модели изолированных автомобилей при том условии, что характер автомобиля должен быть наиболее общим, без конкретных узнаваемых признаков определенных моделей и быть полностью создан самим автором. Недопустимо загружать 3Д модели реально существующих автомобилей, т.к. это будет нарушать авторские права авто производителей. Также, для коммерческого или редакционного использования, не принимаются иллюстрации автомобилей, которые повторяют защищенный авторскими правами дизайн моделей Фольксваген Битл, Автофургон, Джетта или Гольф.

—» Супермикросток.ру —» Подписаться на канал

#шаттерсток #shutterstock

📌 Отправка контента: транспортные средства

Часть 2

🔹 Строительная и сельскохозяйственная техника — разрешаются фотографии, на которых данная техника не может быть идентифицирована. Разрешаются иллюстрации и 3Д модели изолированной техники и оборудования при том условии, что их характер должен быть наиболее общим, без конкретных узнаваемых признаков определенных моделей и быть полностью создан самим автором.

Оборудование фирмы Катерпиллар — изображения со строительной техникой, которые содержат логотип Катерпиллар «CAT» или «Catepillar Yellow» не допускаются для коммерческого использования, только для редакционного с надлежащим заголовком.

Оборудование компании Джон Дир — желто-зеленая окраска техники является защищенным товарным знаком, и даже если на технике не видно логотипа компании с прыгающим оленем, то фотографии все равно допускаются к продаже только по редакционной лицензии с надлежащим заголовком.

🔹 Номерные знаки — фотографии или иллюстрации с изолированными государственными номерными знаками, даже если те пустые, не могут быть приняты для коммерческого использования. Номерные знаки допустимо продавать по редакционной лицензии с надлежащим заголовком.

Иллюстрации изготовленных номерных знаков могут быть приняты для коммерческого использования до тех пор, пока не будет оформлена фактическая государственная лицензия.

🔹 Шины Мишлен — изображения с логотипом шины Мишлен не могут быть приняты для коммерческого использования, но приемлемы для редакционного использования с надлежащим заголовком. Слово «Michelin» не может использоваться как ключевое слово.

🔹 Мотоциклы — фотографии, иллюстрации и 3D-визуализации мотоциклов, независимо от того, изолированы ли они на белом фоне или находятся в естественной среде, приемлемы для коммерческого использования, если дизайн мотоцикла является общим, а производитель или бренд не идентифицируется.

Продукция Харли-Дэвидсон — мотоциклы, логотипы, эмблемы, названия и/или ключевые слова неприемлемы для коммерческого использования. Они приемлемы только для редакционного использования, с надлежащим заголовком.

🔹 Поезда — фотографии, иллюстрации и 3D-визуализации поездов, независимо от того, изолированы ли они на белом фоне или находятся в естественной среде, приемлемы для коммерческого использования, если дизайн поезда является общим, а производитель или бренд не идентифицируется.

Изображения с поездами ТГВ во Франции и Синкансэн в Японии допустимы только для редакционного использования.

—» Супермикросток.ру —» Подписаться на канал

📌 У Лори есть канал с запросами от клиентов

https://t.me/lori_ru_requests

Кому интересно, можете подписаться. Иногда требуются изображения с определенных локаций.

—» Супермикросток.ру —» Подписаться на канал

📌 Отчет Pinterest о тенденциях лета 2024 года

https://newsroom.pinterest.com/news/summer-trends-report-2024/

—» Супермикросток.ру —» Подписаться на канал

🚀 Айсток и Гетти Имаджес обновили статистику для авторов

Микросток выкатил обновление, которое немного «причесывает» статистику по продажам и визуализирует ее в читаемый формат. Это конечно не идеал, но все же лучше чем ничего.

Посмотреть можно тут: https://esp.gettyimages.com/contribute/stats

—» Супермикросток.ру —» Подписаться на канал