#ML #NormalMap #Texture #Photoshop
Наверное вы не раз слышали от меня или кого то ещё, про Normal Map текстуры, а так же как они помогают симулировать свет на ровных объектах, проявляя его «рельеф». Сегодня встретил самый очевидный и понятный пример того, как это работает, с помощью переосмысления портретной живописи.
Не нравиться как лёг свет на фотографии? Просто разверни солнце!
P.s. Есть решения с ML для Photoshop где это работает автоматически, более того, используя базу данных фотографий (большую базу данных ) можно даже разворачивать лицо на статичном изображение! Магия да и только!
https://youtu.be/EDoBwchJ6Vc
Наверное вы не раз слышали от меня или кого то ещё, про Normal Map текстуры, а так же как они помогают симулировать свет на ровных объектах, проявляя его «рельеф». Сегодня встретил самый очевидный и понятный пример того, как это работает, с помощью переосмысления портретной живописи.
Не нравиться как лёг свет на фотографии? Просто разверни солнце!
P.s. Есть решения с ML для Photoshop где это работает автоматически, более того, используя базу данных фотографий (большую базу данных ) можно даже разворачивать лицо на статичном изображение! Магия да и только!
https://youtu.be/EDoBwchJ6Vc
YouTube
Painting using a normals palette
I painted over this image of Frederick Douglass using a sphere palette made from a normals sphere. I brought it into Photoshop as a normal map in a 3D layer to try out different lighting and reflections.
This media is not supported in your browser
VIEW IN TELEGRAM
Нейронные сети и другие технологии машинного обучения помогают художникам быстрее создавать оригинальные работы, одна из таких сетей PolyGen - авторегрессионная модель трехмерных сеток.
Она генерирует 3D объекты определенных классов (из небезызвестного датасета ShapeNet), и пока это лучшее, что есть в этом направлении.
Почему лучшее? У проекта есть google-colab, в котором можно генерировать модели на датасете ShapeNet. Меняя параметры генератора, можно получить полигональные модели в формате obj, которые можно скачать и дальше с ними работать.
#ml #tool
Она генерирует 3D объекты определенных классов (из небезызвестного датасета ShapeNet), и пока это лучшее, что есть в этом направлении.
Почему лучшее? У проекта есть google-colab, в котором можно генерировать модели на датасете ShapeNet. Меняя параметры генератора, можно получить полигональные модели в формате obj, которые можно скачать и дальше с ними работать.
#ml #tool
This media is not supported in your browser
VIEW IN TELEGRAM
Алгоритмы машинного обучения помогают художникам решать, как рутинные вычислительные задачи, так и творческие, снижая “страх белого листа”. Это большой шаг навстречу демократизации творчества, но об этом отдельно.
Мы собрали список полезных сервисов и программ для CG художников с машинным обучением, для которых не нужно знание кода:
- Runway ML программа, в которой собраны самые популярные алгоритмы машинного обучения. С их помощью можно работать с изображениями, видео и даже обучать сетку практически с нуля на своих примерах.
- EbSynth программа из категории Style transfer, с ее помощью можно оживлять людей на картинах и стилизовать длинные ролики.
- Artbreeder.com мы рекомендуем всем для первого знакомства с нейронными сетями. Его можно использовать для создания концептов, персонажей и для генерации новых форм и образов.
Все эти ресурсы мы использовали для разработки AR контента для ARTLIFE FEST в прошлом году, больше инструментов можно найти в нашей статье.
#ml #tipsandtools
Мы собрали список полезных сервисов и программ для CG художников с машинным обучением, для которых не нужно знание кода:
- Runway ML программа, в которой собраны самые популярные алгоритмы машинного обучения. С их помощью можно работать с изображениями, видео и даже обучать сетку практически с нуля на своих примерах.
- EbSynth программа из категории Style transfer, с ее помощью можно оживлять людей на картинах и стилизовать длинные ролики.
- Artbreeder.com мы рекомендуем всем для первого знакомства с нейронными сетями. Его можно использовать для создания концептов, персонажей и для генерации новых форм и образов.
Все эти ресурсы мы использовали для разработки AR контента для ARTLIFE FEST в прошлом году, больше инструментов можно найти в нашей статье.
#ml #tipsandtools
Media is too big
VIEW IN TELEGRAM
Еще один ML инструмент для анимации - Cascadeur вчера анонсировал новую версию спустя 2 года!
Это инструментарий для создания анимации 3D-персонажей, а интуитивный дизайн поможет быстро освоиться, даже если вы не имели опыта работы в похожих программах.
Инструменты на основе физики и deep learning позволяют упростить работу. Например, корректировать тайминги и траектории и выставлять максимально естественные позы. Таким образом вы можете избежать ненужной рутины и полностью сосредоточиться на творчестве.
#ml
Это инструментарий для создания анимации 3D-персонажей, а интуитивный дизайн поможет быстро освоиться, даже если вы не имели опыта работы в похожих программах.
Инструменты на основе физики и deep learning позволяют упростить работу. Например, корректировать тайминги и траектории и выставлять максимально естественные позы. Таким образом вы можете избежать ненужной рутины и полностью сосредоточиться на творчестве.
#ml
Привет! Тут вы узнаете про особенности работы с компьютерной графикой для фиджитал проектов. Канал ведет команда PHYGITALISM 👋
Вас ждет контент:
- Обзоры крутых механик #mechanics
- ML инструменты для создания графики #ml
- Новости из мира CG и Phygital #news
- Обзоры интересных кейсов и решений #case
- Наши эксперименты и плагины #byphygitalism
- Тесты тулзов и приложений полезных для работы #tipsandtools
- Рубрика от художницы Кати Токсик про NUE #interface #KatyaYanzen
Вас ждет контент:
- Обзоры крутых механик #mechanics
- ML инструменты для создания графики #ml
- Новости из мира CG и Phygital #news
- Обзоры интересных кейсов и решений #case
- Наши эксперименты и плагины #byphygitalism
- Тесты тулзов и приложений полезных для работы #tipsandtools
- Рубрика от художницы Кати Токсик про NUE #interface #KatyaYanzen
PHYGITALISM
PHYGITALISM - PHYGITALISM
Молодая технологическая компания, разрабатывающая проекты на стыке xR, machine learning и интерактивных технологий.
This media is not supported in your browser
VIEW IN TELEGRAM
AMD представила открытую технологию ИИ-масштабирования изображения!
FidelityFX Super Resolution увеличивает разрешение изображения на основе алгоритмов искусственного интеллекта. Это аналог NVIDIA DLSS с открытым кодом и возможностью работы на разных видеокартах.
Новость крутая, но пока предварительная, остается ждать реальных тестов от сообщества!:)
А так потенциально очень полезный SDK, чтобы повысить fps и полноценно использовать мониторы с большим разрешением.
#tool #sdk #ml
FidelityFX Super Resolution увеличивает разрешение изображения на основе алгоритмов искусственного интеллекта. Это аналог NVIDIA DLSS с открытым кодом и возможностью работы на разных видеокартах.
Новость крутая, но пока предварительная, остается ждать реальных тестов от сообщества!:)
А так потенциально очень полезный SDK, чтобы повысить fps и полноценно использовать мониторы с большим разрешением.
#tool #sdk #ml
This media is not supported in your browser
VIEW IN TELEGRAM
Это не гипноз, а демонстрация того, как улучшилась детекция рук на Iphone благодаря фреймворку Create ML.
Что важного появилось?
👋Классификация действий
✋🤚Обнаружение правой / левой руки
🙌Обнаружение позы рук
🤘Обнаружение жестов рук
🙆♀️Использует #ARKit People Segmentation
Видео о работе фрэймворка от Apple по ссылке.
#ML #AR #Apple
Что важного появилось?
👋Классификация действий
✋🤚Обнаружение правой / левой руки
🙌Обнаружение позы рук
🤘Обнаружение жестов рук
🙆♀️Использует #ARKit People Segmentation
Видео о работе фрэймворка от Apple по ссылке.
#ML #AR #Apple
Что вы представляете, когда видите «2 + 2»? А вот, что представляет нейронная сеть.
Это отличный пример тому, что с алгоритмами не стоит соревноваться, они выдают самые неожиданные решения, которые нас вдохновляют!
Попробовать можно в коллабе, не забывайте добавлять фразу “Unreal Engine” к тому, что хотите сгенерировать - качество будет лучше.
#inspo #ml
Это отличный пример тому, что с алгоритмами не стоит соревноваться, они выдают самые неожиданные решения, которые нас вдохновляют!
Попробовать можно в коллабе, не забывайте добавлять фразу “Unreal Engine” к тому, что хотите сгенерировать - качество будет лучше.
#inspo #ml
This media is not supported in your browser
VIEW IN TELEGRAM
Наш новый проект на Behance не только красиво показывает, как нейронки могут применяться для промышленности, но и рассказывает об использовании Blender 3D для генерации синтетических данных
Нашей задачей было в сжатые сроки получить достаточный датасет для обучения нейронной сети выявлению дефектов на трубах, а ручной сбор датасета не подходил.
Поэтому мы создали инструмент для генерации 3D-моделей труб, их поверхностей и дефектов в Blender
После фотореалистичного рендеринга на полученных изображениях автоматически отмечались повреждения труб, и как результат – мы обогатили датасет в 1000 раз!
Подробнее о создании генератора можно прочитать в нашей статье
Будем рады фидбеку в комментариях, ответить на вопросы по проекту или созданному генератору)
#byphygitalism #blender #ml
Нашей задачей было в сжатые сроки получить достаточный датасет для обучения нейронной сети выявлению дефектов на трубах, а ручной сбор датасета не подходил.
Поэтому мы создали инструмент для генерации 3D-моделей труб, их поверхностей и дефектов в Blender
После фотореалистичного рендеринга на полученных изображениях автоматически отмечались повреждения труб, и как результат – мы обогатили датасет в 1000 раз!
Подробнее о создании генератора можно прочитать в нашей статье
Будем рады фидбеку в комментариях, ответить на вопросы по проекту или созданному генератору)
#byphygitalism #blender #ml
Forwarded from РЕПТИЛОИДНАЯ (Denis Rossiev)
Промт-инжиниринг
#ML #Art
Поговорим о профессии будущего. Две самые популярные модели для генерации изображений по текстовому запросу сегодня — DALLE-2 и Midjourney. Скоро открывается Stable Diffusion.
Дальше их будет больше — и начнут появляться специализированные модели. Например, для иконок. Или диаграмм. Или анимешных аватарок.
Кажущаяся простота (ввел текст — получил картинку) быстро развеивается, когда нужно получить конкретный результат, а не рандомную красоту. Модели обучены по-разному — тот запрос, который выдает красоту в Midjourney, не сработает в DALLE, и чтобы дойти до нужного результата, может потребоваться не один десяток генераций.
В общем, нужно уметь составлять запросы — подбирать слова, формулировки, модификаторы для разных моделей. Умение будет востребовано — в ближайшем будущем ожидаем появление профессии Промт-инженера (и инфоцыганских курсов).
Пейзажи сгенерировал Денис из нашего чатика Нейроэстетика.
#ML #Art
Поговорим о профессии будущего. Две самые популярные модели для генерации изображений по текстовому запросу сегодня — DALLE-2 и Midjourney. Скоро открывается Stable Diffusion.
Дальше их будет больше — и начнут появляться специализированные модели. Например, для иконок. Или диаграмм. Или анимешных аватарок.
Кажущаяся простота (ввел текст — получил картинку) быстро развеивается, когда нужно получить конкретный результат, а не рандомную красоту. Модели обучены по-разному — тот запрос, который выдает красоту в Midjourney, не сработает в DALLE, и чтобы дойти до нужного результата, может потребоваться не один десяток генераций.
В общем, нужно уметь составлять запросы — подбирать слова, формулировки, модификаторы для разных моделей. Умение будет востребовано — в ближайшем будущем ожидаем появление профессии Промт-инженера (и инфоцыганских курсов).
Пейзажи сгенерировал Денис из нашего чатика Нейроэстетика.
Forwarded from РЕПТИЛОИДНАЯ (Denis Rossiev)
The-DALL·E-2-prompt-book-v1.01.pdf
21.5 MB
Промт-инжиниринг: как составлять запросы к нейронкам
#ML
Красивый и понятный PDF на 80(!) страниц о том, как составлять запросы для генераций изображений из текста в DALLE.
Конечно, в других моделях запросы будут составляться иначе, но общее понимание мануал даст.
Полученные знания вы уже сегодня сможете попробовать применить в бесплатно/свободно доступных нейронках: Kandinsky, Craiyon, Midjourney.
P.S. А вот тут уже начали продавать промты. Ад! Но вполне возможно, что в некотором будущем будет удобнее купить за пару баксов промт, чем ковыряться и подбирать его целый день, или нанять промт-инженера для более сложных задач.
#ML
Красивый и понятный PDF на 80(!) страниц о том, как составлять запросы для генераций изображений из текста в DALLE.
Конечно, в других моделях запросы будут составляться иначе, но общее понимание мануал даст.
Полученные знания вы уже сегодня сможете попробовать применить в бесплатно/свободно доступных нейронках: Kandinsky, Craiyon, Midjourney.
P.S. А вот тут уже начали продавать промты. Ад! Но вполне возможно, что в некотором будущем будет удобнее купить за пару баксов промт, чем ковыряться и подбирать его целый день, или нанять промт-инженера для более сложных задач.
Forwarded from Трендоскоп
Революция Text-to-Image
#ML
Технология генерации изображений из текста развивается стремительно. Мы уже писали про DALL-E и GLIDE от OpenAI, но за последние месяцы появилось много других впечатляющих моделей: Google выпустили Imagen, Meta — Make-A-Scene, Microsoft — NUWA.
Повестку задают не только крупные ИИ-лаборатории корпораций. Стартапы тоже активно заходят в text-to-image и зачастую бьют больших игроков по качеству и скорости генерации. Можно отметить 2 свежих проекта:
- Stable Diffusion на днях открыли бету для всех желающих. В отличие от OpenAI (который далеко не Open), Stable Diffusion заточен на создание своих сервисов — код открыт, веса обещают выложить уже на этой неделе. При этом качество генерации сопоставимо с DALL-E 2. Скоро обещают сделать удобный Inpainting — можно будет брать любые изображения и изменять, соединять, расширять их. В будущем планируют раскатить функционал и на видео.
- MidJourney также недавно стал доступен всем желающим. Генерация происходит через сервер в Дискорде, который набрал уже почти миллион участников. Можно подключить их бота и на своём сервере.
Генерация изображений — это только первый этап. Далее наступит эра синтеза 3D-моделей. Snap на днях представили технологию NeROIC — это новый способ создания трёхмерных моделей для AR из общедоступных фотографий и видео. Нейронка сама додумывает недостающие виды изображения и синтезирует 3D-модель.
А в будущем придёт и генерация видео. Тут релизом отличились Apple: они представили нейронку для создания 3D-сцен по текстовому описанию GAUDI. Качество пока довольно низкое и много артефактов, но фундамент для генерации виртуальных миров заложен.
Комментарии под этим постом предлагаем использовать для поиска соратников. Если у вас есть идея продукта/сервиса/фичи на базе text2image-технологии, опубликуйте тизер в комментах. Трендоскоп читают сотни ML-разработчиков — вполне вероятно, что кого-то из них вы вдохновите написать вам с предложением о коллаборации :)
#ML
Технология генерации изображений из текста развивается стремительно. Мы уже писали про DALL-E и GLIDE от OpenAI, но за последние месяцы появилось много других впечатляющих моделей: Google выпустили Imagen, Meta — Make-A-Scene, Microsoft — NUWA.
Повестку задают не только крупные ИИ-лаборатории корпораций. Стартапы тоже активно заходят в text-to-image и зачастую бьют больших игроков по качеству и скорости генерации. Можно отметить 2 свежих проекта:
- Stable Diffusion на днях открыли бету для всех желающих. В отличие от OpenAI (который далеко не Open), Stable Diffusion заточен на создание своих сервисов — код открыт, веса обещают выложить уже на этой неделе. При этом качество генерации сопоставимо с DALL-E 2. Скоро обещают сделать удобный Inpainting — можно будет брать любые изображения и изменять, соединять, расширять их. В будущем планируют раскатить функционал и на видео.
- MidJourney также недавно стал доступен всем желающим. Генерация происходит через сервер в Дискорде, который набрал уже почти миллион участников. Можно подключить их бота и на своём сервере.
Генерация изображений — это только первый этап. Далее наступит эра синтеза 3D-моделей. Snap на днях представили технологию NeROIC — это новый способ создания трёхмерных моделей для AR из общедоступных фотографий и видео. Нейронка сама додумывает недостающие виды изображения и синтезирует 3D-модель.
А в будущем придёт и генерация видео. Тут релизом отличились Apple: они представили нейронку для создания 3D-сцен по текстовому описанию GAUDI. Качество пока довольно низкое и много артефактов, но фундамент для генерации виртуальных миров заложен.
Комментарии под этим постом предлагаем использовать для поиска соратников. Если у вас есть идея продукта/сервиса/фичи на базе text2image-технологии, опубликуйте тизер в комментах. Трендоскоп читают сотни ML-разработчиков — вполне вероятно, что кого-то из них вы вдохновите написать вам с предложением о коллаборации :)
