Я прикидываю концепты для иллюстрации

Для этого перебирал разные техники исполнения/медиумы из большого списка. И внезапно получил прикольные пейзажи из войлока.

#automatic1111
#stablediffusion

ControlNet уже пару недель главная новость в поле StableDiffusion

А я только сейчас показываю пример с ним в своём рабочем процессе. Зато реальное применение, кек.

Пробовать тут (переведено на русский):
https://colab.research.google.com/github/tg-bomze/collection-of-notebooks/blob/master/AI_Interior_Designer.ipynb#scrollTo=niAjODJhEUDg

Что может: выдать варианты одного и того же интерьера в разных стилях.

Принцип работы: загружаете картинку-референс, указываете, какую информацию из неё извлекать - карту глубин, сегментацию, контуры или всё вместе. Выбираем один из преднастроенных стилей (их тут штук 30) или расписываем промптом свой авторский. Генерим.

Что не так: сами картинки. Только квадраты, качество скачет от приличного до dalle-подобных шумных уродцев. Я пробовал одинаковые стили на разных рефах и это чистый рандом. Идея огонь, но требуется допилить.

Что так: полезно для творческого полёта в начале работы. Расширяет воображение.

В примерах опорная картинка и варианты.

#googlecolab
#controlnet

txt2img может в руки

Сегодня я снова услышал от собеседника, что генеративные нейросетки не умеют в пальцы, глаза и вообще в форму человеческого тела. Сам я не генерил людей с декабря, поэтому собственных примеров на руках не было. Решил исправить этот момент и подтвердить свои же слова из лекции, что в декабре эти проблемы с анатомией в общем-то решили.

Вот так сейчас выглядят сырые генерации в дообученных моделях, на довольно сыром промпте. Все примеры без коррекции. Я использовал не самую популярную на Civitai.com модельку DucHaitenAIart.

#люди
#automatic1111
#civitai

ControlNet делает текст в генерациях – с моей помощью

Пока мы все ждали выхода DeepFloyd, пошли рабочие запросы на генерацию текста в картинке от нейросети. К счастью, в этом нам теперь помогает ControlNet.

@avaeyl сделала в Cinema4D объёмную картинку с текстом и предметами – и сохранила её как карту глубин.
Затем эта карта служит в КонтролНете основой для генерации. Довольно замороченый способ, требующий внимательности и точности. Однако он выводит контроль за генерацией картинок на новый уровень. Теперь ты можешь придумать композицию, сделать её эскиз и обдизайнить в любом стиле, причём на генерацию вариантов уходят минуты, а не часы!

В примерах референс с картой глубин и рабочие результаты.

#controlnet
#automatic1111