Нейронавт | Нейросети в творчестве
x-flux

XLabs AI только что выкатили приложение на gradio, в котором можно попробовать их инструменты - лоры и контролнет.
Запустить можно онлайн или локально

Гитхаб
Демо

@ai_xlabs

#lora #controlnet #flux

Нейронавт | Нейросети в творчестве
Stable Diffusion 3 Medium Fine-tuning Tutorial

StabilityAI опубликовали инструкцию по обучению LoRa SD3 Medium

Ну молодцы, чё. Все уже научились обучать флюкс, даже я почти.

Спасибо @asleephidden

#finetuning #tutorial #sd3 #LORA

⬆️ сценарии обучения:

🟠LoRA для "text-to-video": cкрипт train_text_to_video_lora.sh;

🟠LoRA для "IMG-to-video": cкрипт train_image_to_video_lora.sh;

🟠SFT всей модели для "text-to-video": скрипт train_text_to_video_sft.sh.

⚠️ Предварительная подготовка данных - один из важнейших условий CogVideoX Factory. Скрипт prepare_dataset.py играет ключевую роль в этом процессе, преобразуя видео и аннотации в латенты и эмбединги. Использование предварительно вычисленных латентов и эмбедингов позволяет не загружать VAE и T5 во время обучения.

CogVideoX Factory предлагает подробную документацию, в которой объясняются шаги по подготовке датасетов, настройке параметров обучения, запуску инференса, информацию о требованиях к памяти для каждой модели и конфигурации, помогая принять корректные решения о выборе стратегии обучения.


📌Лицензирование : Apache 2.0 License.


🖥Github


@ai_machinelearning_big_data

#AI #ML #LoRA #T2V #IMG2V #Finetune

Нейронавт | Нейросети в творчестве
Итак, кастомизация SD3.5

Для обучения лоры SD3.5 Large запаситесь 24Gb VRAM

Официальный гайд

готовые лоры:
раз
два
три
———————————
Примеры ComfyUI

———————————
SD3.5-fp8 (пожатая модель)

Спионерил у @SergeyTsyptsyn

#lora #text2image #comfyui #finetuning

Нейронавт | Нейросети в творчестве
Loras in Krea

Обучение лор для #Flux (и не только?) на Krea.ai

Сейчас идет запись в вейтлист, но если успеете "в первую сотню" желающих, получите доступ сразу. На странице вейтлиста внизу мелким шрифтом "I have access code". Возможно, появится после подачи заявки. Жмем и вводим пароль:

EARLYBIRD

Записаться в вейтлист

Подсмотрел у Сергея Цыпцына

#lora

Нейронавт | Нейросети в творчестве
Говорят, можно обучить лору #flux на нескольких персонажей. Сам не пробовал

Вообще считается что при попытке запихнуть в одну лору несколько объектов они смешиваются

Видео
Реддит

#lora #tutorial

Нейронавт | Нейросети в творчестве
FLUX Portrait Trainer

У fal.ai появился тренировщик лоры flux на портреты. Раньше был просто тренировщик. А теперь прям портретный. Ага, платный

Плати-тренируй

#lora #flux

Нейронавт | Нейросети в творчестве
diffusion-pipe

Экспериментальный тренер диффузных моделей.
Поддерживает #Flux (лоры, полный файнтюн), LTX-Video, HunyuanVideo (лоры)

Реализовано распараллеливание для моделей которые не влезают в GPU

На Винде завелось только у одного юзера, но это неточно

Лору HunyuanVideo можно тренить на картинках на 24GB VRAM

LTX-Video с таким богатым VRAM можно тренить и на видео

#lora #finetuning

Нейронавт | Нейросети в творчестве
В Krea.ai обучение #lora открыли для всех
(Кто готов оплатить тариф от $10)
Для обучения потребуется от 3 до 50 изображений

Нейронавт | Нейросети в творчестве
В Krea.ai обучение #lora открыли для всех
(Кто готов оплатить тариф от $10)
Для обучения потребуется от 3 до 50 изображений

Нейронавт | Нейросети в творчестве
FLUX Pro Finetuning API

BlackForest Labs выпустили API для дообучения #FLUX

Уверяют что результат файнтюна будет работать со всеми официальными вариантами FLUX и совместим с FLUX Tools

FLUX Finetuning Beta Guide

#finetuning #lora #api

Нейронавт | Нейросети в творчестве
Тренировка Lora FastHunyuan на 16ГБ VRAM

удалась реддитору, подробности по ссылке

#lora #finetuning

Нейронавт | Нейросети в творчестве
Video Model Studio (VMS)

Интерфейс Finetrainers на gradio для тренировки видео лор в несколько кликов

Поддерживаемые модели:

LTX-Video - протестировано на инстансе A100
HunyuanVideo - теоретически должно работать из коробки с достаточной вычислительной мощностью

Код
Демо - для работы демоспейс надо скопировать и видимо взять платный GPU

Бонус - альтернатива diffusion-pipe-ui

#lora #training #finetuning #GUI

Нейронавт | Нейросети в творчестве
Keyframe Control Lora

Лора ключевых кадров для HunyuanVideo T2V (T2V, генератор по тексту - так в репозитории написано)

Задаем два кадра и количество кадров - получаем видео, начинающееся с первого, оканчивающееся вторым

#lora #text2video #image2video

Нейронавт | Нейросети в творчестве
Инструкция по портативной установке Nunchaku v0.1.4 на Windows

+ Инструкция по конвертированию лор в формат SVDQuant для Nunchaku на ComfyUI Portable (Windows)

#ComfyUI #lora #text2image