Значительно ускорить процесс создания AR приложения можно с помощью Unity Technologies для AR разработки - MARS. Этот инструмент - надстройка над ARFoundation, одна из его функций симуляция работы AR на синтетических и реальных данных.

MARS анонсировал несколько полезных для нас функций, которые находятся в разработке, но уже можно протестировать:

- Трекинг тела - очень популярная AR функция на данный момент, в MARS появилась возможность не только симулировать ее, но и подробно описать, как именно виртуальный контент будет работать с человеческим телом.

- MARS Companion App позволяет сканировать реальное окружение и передавать данные в редактор для последующих тестов.

- MARS можно встроить, как Subsystem, в любой Unity проект на базе ARFoundation, таким образом уже существующие проекты можно быстрее реализовывать.

Вы уже успели протестировать MARS в своих проектах?

#tool #unity

Полезные гайды

Я хочу быть частью технологичного развивающегося мира, но не знаю с чего начать. Узнали? Когда я только погружалась, я просто не знала, что гуглить и тем более не знала, как направить мои знания из графического дизайна в технологию.

Как оказалось, для старта достаточно услышать три главных слова: гайды от
Magic Leap / Hololens / Oculus Quest

В них отлично раскрыта тема расширенной реальности, определения волнующих понятий, сколько должна длиться анимация и сколько слов в строке оптимально, а также раскрыты вопросы эргономики, когнитивной и физической нагрузки на пользователей. Не раз встречала, как курсы пересказывают информацию оттуда слово в слово и показывают те же картинки, так что полистайте, сэкономите деньги)

Делюсь конспектом по hand tracking от окулуса, который можете дублировать себе в Notion и начинать проект.

#KatyaYanzen #NUE

Вот пример, как правильно и неправильно строить взаимодействие пользователя с цифровым слоем.

Уже понимаете, в чем разница и почему так?

#KatyaYanzen #NUE

Делимся мнением об интересном 3D инструменте для дизайнеров Spline.Design, который недавно выпустили в альфа версии:

- Простой дружелюбный интерфейс. Во многом напоминает визуально figma, так что многим дизайнерам, кто привык работать в 2D будет легче адаптироваться к 3D.

- Преимущество инструмента в webgl в том, что можно получить embed с ссылкой и интегрировать это в любой сайт. Либо же просто разослать - очень удобно делиться. Из-за своей простоты конечно не супер огромный функционал, но вполне хватает собрать красивую композицию :)

- Еще один важный поинт в функционале это евент система. На любой объект можно назначить евент по типу нажатие мышки и привязать к нему изменение каких-то параметров , например, цвета. В общем, быстрое создание интерактива, которое можно интегрировать на сайт или использовать как интерактивную 3D презентацию вместо обычных powerpoint/keynote-презентаций.

#tipsandtools #software

Eyek обновлен до версии 0.2.3!

В новой версии стало возможным использовать референсные изображения для проекций на текстуру. Eyek - это дополнение для текстурирования путём проецирования нескольких изображений с камер или референсов на одну UV.

Хотите узнать больше об инструменте - читайте статьи о нем на 80lvl и 3dnchu 🙂

#blenderaddon #tool

Мы выпустили второй PHYGITAL PODCAST, посвященный формам описания 3D данных!

Подкаст будет полезен для художников, работающих с трехмерными данными. Вы узнаете, чем формы отличаются от форматов, как могут выглядеть 3D данные и где использоваться, их плюсы и минусы, а также примеры использования дескриптивных представлений. Для желающих узнать больше о 3D данных, читайте нашу заметку на хабре.

Смотрите подкаст и делитесь впечатлениями!

Keen Tool запилил ИИ-кнопку! Теперь настоящие кИИн тУУлз!

Помнится сидели мы с в 2018 году в Софии на Total Chaos и я Рому пытал про ИИ (даже подкалывал его на презентации Keen Tools, задавая вопросы про нейросетки) - но Рома отмахивался от меня как от укушенного ИИшечкой. А сам, мерзавец, читал доклады по нейросеткам на питерском Ивенте и вообщем был одним из первых в ИИ-теме.

И вот наконец случилось!

"FaceBuilder теперь снабжён нейросетями, позволяющими запинить лицо на фотографии по нажатию одной кнопки! Признаемся, мы в команде теперь пиним лица только так и не хотим возвращаться к ручном варианту!

Новая волшебная кнопка Align Face есть как в FaceBuilder, так и в FaceTracker — ставить кейфреймы теперь проще! Кроме того, теперь все плагины KeenTools работают в Nuke 13."

Ура! Набросим еще больше ИИ на морду кожаного мешка.


Кстати, недавно ноды Keen Tools появились в Nuke Indie, а также они добавили 51 совместимую с ARKit форму FACS в FaceBuilder for Blender!

Подробности тут: https://keentools.io

Скажите честно, путаетесь в понятиях AR, VR, MR?

Индустрия совсем молодая, у нас еще нет договоренности в терминах и это становится проблемой, потому что мы апеллируем разными понятиями. Маркетологи плодят громкие слоганы, а мы теряемся в формулировках. Также, основная фундаментальная база знаний была создана в 90-е. Сегодня я читаю современные статьи, а по сути они пересказ старых.

Отличный пример работы с базой знаний — два исследования 1994 и 2017 года. Первый заложил фундамент, второй пересмотрел, дополнил, поставил под сомнение (еще и красиво перерисовал) идею о виртуально-реальном континууме и о видах реальностей.

- «A Taxonomy of Mixed Reality Visual Displays»(1994) одна из самых известных работ Пола Милграма с напарником Кишимо

- Магистерская работа Эндрю Хилстеда «Simulating Psychedelic Therapy through Mediated Reality» (2017)

И вдогонку инсайт сегодняшнего дня: сейчас насчитывается больше 7 видов реальностей.

#KatyaYanzen #XR #NUE

USDZ - формат, в котором можно хранить и просматривать 3D модели в AR на iPhone без скачивания стороннего приложения. Модели в USDZ работают с технологией ARKit на Apple устройствах. Благодаря этому они поддерживают анимацию и простую физику, окклюзию, треккинг лица и тела. Это очень удобно - можно делиться качественными 3D контентом на сайте, в мессенджере и статьях.

Reality Composer - приложение на IOS, с помощью которого редактировать USDZ стало возможно прямо с телефона. По сути это тот же SparkAR в телефоне, с урезанными функциями, где можно создавать анимированные сцены, маски и привязывать контент к маркеру.

#tipsandtools

Кто еще не тестил формат USDZ, прикладываем модельку нашего интерактивного демо-стенда, она должна вписаться в ваш интерьер :)

Scan Thing — приложения для iOS, iPadOS которое позволяет захватывать, вырезать или перемещать любые объекты с изображений или с помощью камеры.

scanthing.app

Как вам USDZ модель Phygital Platform? На Behance мы оформили визуальный рассказ об этом проекте, где вы можете подробнее узнать о реализации такого решения не только со стороны бизнеса, но и со стороны разработки - проектирования основы стенда и создания компьютерной графики.

Будем рады фидбеку!

Очень крутое видео про будущее CG: там и про новые интерфейсы (NUE) и про усиленный интеллект (IA)

Довольно свежий ролик про будущее CGI, вирт продакшен, мокап, ассеты, уе, реалтайм - все как мы любим в общем.
Даю ссылку сразу на 1:47, там прям сладко.
https://www.youtube.com/watch?v=XyaBFh_6b-8&t=107s

Вы хотели больше механик для дополненной и виртуальной реальности - вот необычный кейс открытия портала с помощью голоса. Зевнул громко и попал в цифровой мир :)

Несмотря на то, что решение необычное, для пользователя такой способ входа в портал будет неудобным. Лучше после первого голосового сигнала оставить портал открытым для входа.

Вы сталкивались с неудобными механиками в AR/VR?

#mechanics

Алгоритмы машинного обучения помогают художникам решать, как рутинные вычислительные задачи, так и творческие, снижая “страх белого листа”. Это большой шаг навстречу демократизации творчества, но об этом отдельно.

Мы собрали список полезных сервисов и программ для CG художников с машинным обучением, для которых не нужно знание кода:

- Runway ML программа, в которой собраны самые популярные алгоритмы машинного обучения. С их помощью можно работать с изображениями, видео и даже обучать сетку практически с нуля на своих примерах.
- EbSynth программа из категории Style transfer, с ее помощью можно оживлять людей на картинах и стилизовать длинные ролики.
- Artbreeder.com мы рекомендуем всем для первого знакомства с нейронными сетями. Его можно использовать для создания концептов, персонажей и для генерации новых форм и образов.

Все эти ресурсы мы использовали для разработки AR контента для ARTLIFE FEST в прошлом году, больше инструментов можно найти в нашей статье.

#ml #tipsandtools

С помощью науки и шейдеров можно создавать невероятные вещи.

Вдохновитесь небольшим визуальным исследованием Sebastian Lague, который визуализировал поведение муравьев и слизистой плесени. Полное видео по ссылке, красота начинается с 14 минуты.

#inspo

In&Out : Дорисовка изображений с помощью инверсии GAN

Обработка изображений стремится к семантически непротиворечивому расширению входного изображения за пределы его доступного содержимого. По сравнению с рисованием - заполнением недостающих пикселей способом, согласованным с соседними пикселями - рисование может быть достигнуто более разнообразными способами, поскольку проблема меньше ограничивается окружающими пикселями

На прошлой неделе мы рассказали об ML инструментах, которые ускоряют работу художников. Пример реального кейса, где мы использовали всю подборку, наш проект ARTLIFE FEST, который мы оформили на Behance.

Благодаря нашему ежегодному сотрудничеству мы знакомим все больше и больше людей с иммерсивным искусством, с новейшими технологиями и обучаем опыту взаимодействия с дополненной реальностью, позволяющей посмотреть на искусство с другой стороны, расширить восприятие и создать новые смыслы.

Как всегда, будем рады обратной связи! :)

#ByPhygitalism #Behance