Какие сетки используются в fashion tech и зачем? 🦄
Часть 1: Визуальные генеративные модели

Серия постов про генеративные модели, trend forecasting, AI Assistants в мире fashion tech. Каждый пост разделю на две части: про то, что уже есть на рынке и про то, что сейчас наиболее активно исследуется/цитируется, а также находится в опенсорсе 👀

💼 Бизнес. Во-первых, это разнообразные try-on на человеке. И хотя в общем случае задача пока больше уходит в рисерч, на уже рынке есть множество достойных адаптаций: например Zalando, Google предлагают выбрать наиболее похожую по фигуре модель и примерять одежду на нее. А коллеги из Genera по размеру одежды генерируют модель еще и с вашим лицом на которую также можно примерять разные вещи. Есть и "обратная" задача — сгенерировать человека-модель к вещи для демонстрации коллекции, например — Mannequin. Это круто для локализаций под разные рынки.
Во-вторых, всевозможные инструменты-ассистенты модельерам для вдохновения/визуализации идеи: генерация принтов XARIIA, prompt-based редактирование и генерация с нуля предметов коллекции Designovel

🧪 Исследования и опенсорс. Когда мы уже реалистично примерим что-то сложнее футболки на нестандартного человека 😡😡 Полгода назад когда я активно рисерчила вопрос с примеркой, самыми модными были диффузии с ControlNet/LoRa. С тех пор ничего принципиально нового не появилось, но стало больше опенсорс моделей. Здесь мне больше всего нравится IDM-VTON. Еще один интересный опенсорс — multimodal-garment-designer. Это human-centric генерация вещи на модели по эскизу + текстовому описанию. Правда, без удобной демки 🥲. Также 3 недели назад вышел репозиторий-анонс генерации по промптам CG-friendly выкроек на предстоящую SIGGRAPH 2024. Это значит, что результаты генерации можно будет открыть в графическом редакторе вроде CLO 3D и подправить по своему усмотрению. Думаю, в планах у DressCode должно быть со временем добавить генерацию выкроек по фотографии изображения