Кейс: BEHR помогает выбрать цвет стен с помощью Spotify.

Узнайте цвет вашего любимого трека! На сайте BEHR Paint работает алгоритм, который определяет характеристики музыки (например, темп) и цвет, соответствующий её настроению. У сайта шикарная анимация фона, который двигается вместе с выбранной музыкой.

Кампания дополняется маской в Instagram и эффектом в TikTok (который доступен только в США, тут можно посмотреть видео). В маске пользователь выбирает музыку и ему предлагается один из цветов палитры Кэти Перри, которые отражают её треки 🤷🏻‍♀️ и созданы специально для этой коллаборации. Мы подумали, что важно рассказать о маске, так как об этой фиче знают не все. В эффектах Instagram можно выбирать музыку до старта записи истории! Важно: при использовании этой функции микрофон не будет работать, так что говорить вместе с музыкой не получится. Мы редко видим такие маски, а BEHR хорошо обыграли её.

Позалипать можно тут: https://behrmusicincolor.com/

Прямая трансляция голограмм в Web AR.

Теперь 8th Wall умеет устраивать прямые трансляции в дополненной реальности, с записанными с помощью инструментов 8i людьми. Компания 8i - это разработчик комплексного решения для записи волюметрик видео a.k.a. голограмм: запись человека на сцене, преобразование в 3D ассеты и интегрирование голограмм на платформы.

Партнерство двух компаний привело к первому решению на рынке, с помощью которого бренд может проводить презентации и мероприятия в прямом эфире со стримингом в WebAR. С 14 октября технология доступна для разработчиков как для заранее записанных голограмм, так и для прямых эфиров. Важно: голограмму придется записывать в одной из студий 8i в США, Новой Зеландии, Японии, Корее или Таиланде.

Процесс, который раньше занимал много времени, завершается за секунды благодаря технологии 8i.

Посмотреть запись трансляции в WebAR. Или QR код в комментариях.

Тренировки в AR 😱

Давно мы не показывали, как креаторы используют Spectacles. Адам Варга показал в Twitter как он использует AR-очки для тренировок.
Если судить по видео, то такие тренировки будут результативными и практичными. Пользователь выполняет нужные действия, очки фиксируют и задают следующее, а если добавить систему ачивок - тренировка превратится в игру.

Слухи: Facebook возможно сменит название

Месяц ребрендинга продолжается, появились слухи о том, что Марк Цукерберг 28 октября объявит о смене названия Facebook. Компания хочет ассоциироваться с метавселенной, а не с соц. сетью.

Цукерберг много говорит о том, что метавселенная в AR/VR - это наше будущее. И видимо новое название будет отражать это видение. Пока это слухи и компания уже прокомментировала новость The Verge фразой "не ориентируйтесь на слухи и спекуляции". Ну, посмотрим, что произойдет в следующий четверг.

Spark AR разрешил использовать статичные лого и надписи в эффектах.

Instagram порадовал вчера вечером и обновил Spark AR Policies. Проблемное правило для идей о запрете статичного текста и логотипов в эффекте отменено! Теперь:
⏺ не нужно интегрировать логотипы и текст в сцену эффекта
⏺ если у бренда есть эффекты, которые не согласованы по этой причине, то смело отправляйте их на повторную модерацию
⏺ Важно: правило 1.3 Visual Text еще актуально. Оно запрещает тексту в эффекте призывать пользователя переходить на другие ресурсы из Instagram, Facebook, Messenger или Portal.

Ура, ура! Но есть ощущение, что качество масок сильно уменьшится. Уже видим море логотипов в правом верхнем углу.

Двойная новость об AR в соц. сетях.

Facebook выкатил групповые эффекты для видеозвонков в Messenger и скоро обещает сделать это для Instagram. В Messenger уже доступно более 70 эффектов, в том числе и игр. Подобные эффекты создаются через Spark AR API и пока доступ предоставлен только нескольким разработчикам.

Pinterest в это время продолжает искать пути монетизации и обновил Idea pin. Такие пины напоминают истории Instagram, в них создают карусели и чаще из видео. Теперь к ним привязывается товар (если у аккаунта есть Product pin), рекомендации других товаров и, ура, AR try-on. На момент анонса, в Pinterest загружено 10к товаров, в основном косметика, которые можно попробовать на себе, но в России это пока не работает. Возможно, мы не нашли, и если это так, то как это найдет пользователь? 🤷🏻‍♀️

Пример AR try-on: https://www.youtube.com/watch?v=iVB-E_0NjjI
А вот эффекты в Messenger доступны для всех, так что советуем попробовать с коллегами.

Кейс: Marvel представляет персонажей Вечных через AR приложение.

Во-первых, хочется сказать: этот AR-опыт выглядит шикарно и если у вас не было желания смотреть Вечных раньше, то после этого захочется.

А теперь к делу. QR-код для установки приложения размещен на баннерах фильма. Приложение весит 1,6 Гб. 1,6 Гб! Персонаж Спрайт устраивает экскурсию по персонажам и основным событиям, которые предшествуют сюжету фильма Вечные. Внутри опыта будут "остановки", в это время вы можете походить вокруг сцены, персонажей и монстров.

Да, это приложение, да, тяжелое, да много людей отвалится на моменте "ой, лень скачивать". Но как же этот опыт круто работает! Он погружает пользователя в мир Вечных через визуальные эффекты и интерактив. Опыт длится 10-15 минут, во время которого пользователь внимательно слушает голос Спрайт и неотрывно смотрит на экран телефона. Вовлечение уровня 2000!

Посмотреть промо-ролик тут.
Попробовать на iOS тут.

Facebook теперь Meta.

Нам даже добавить нечего 😂

Главное об AR с конференции Facebook Connect.

Вчера Марк Цукерберг представил не только видение метавсленной, но и рассказал о ближайших обновлениях AR на платформах Facebook и Instagram. Коротко расскажем о самом важном:

⏺ До конца 2021 года Meta выпустит приложение Polar, в котором пользователи смогут создавать простейшие AR эффекты. Для использования приложения не нужно знание Spark AR, это приложение похоже на сервисы Supa и Canva, только для AR-эффектов.
⏺ В следующем году выйдет новый инструмент в Spark AR - World AR, который привяжет AR-контент к гео точкам. С его помощью компания предлагает создавать экскурсии и квесты. Можно создать своеобразный Pokemon Go, только от бренда и в Instagram!
⏺ Официально подтвердили трекинг рук и тела. Очень ждем этого!
⏺ Групповые эффекты для видео звонков уже доступны в Instagram и Facebook, и их загрузка теперь открыта для всех. Игры, костюмы и просто веселые эффекты для нескольких человек - вовлечение в бренд выкручиваем на максимум 🙂
⏺ Spark AR запускает программу обучения для продвинутых креаторов + запускает сертификацию специалистов.

Более подробно и на английском в блоге Spark AR: https://sparkar.facebook.com/blog/facebook-connect-2021-roundup/

Пока нет новостей мы решили сделать подборку прикольных эффектов Instagram.
В комментариях полные видео с эффектами.

1) Эффект для нового мультика Ron's Gone Wrong для основной камеры и с крутым интерактивом внутри. Попробовать: https://www.instagram.com/ar/420676589645211

2) Единственная маска в подборке и она превратит вас в Диву Плавалагуну из Пятого Элемента. Попробовать: https://www.instagram.com/ar/183866067236221/

3) Оживающий стакан с Джоном Ленноном. Стакана для пробы ни у кого нет, так что любоваться будем только на видео.

4) Даже слишком реалистичная змея 😱 Попробовать: https://www.instagram.com/ar/944401592831965

5) Поезд, но не в Пусан, а из купален госпожи Юбабы. Портал переносит пользователя в мир Унесенных призраками. Попробовать: https://www.instagram.com/ar/626814932016217/

Трекинг рук и тела уже доступен в Instagram

Как и обещал Марк на конференции Facebook Connect - Spark AR выкатил обновление и теперь трекинг тела и рук доступен для всех! Надеемся, что вы уже придумали такой эффект для бренда?

Про трекинг тела стоит рассказать чуть подробнее: он 2D-шый, цепляется к 20 точкам тела (колени и локти, например), эффект будет работать как для одного человека, так и для нескольких в кадре. Эффект можно создавать и для отдельных частей тела. Можно так же трекать где начинается и заканчивается тело людей в кадре и, например, поменять их местами 😂
Meta уже работает над тем, чтобы трекинг стал 3D и скоро поделятся инфой. Это значит виртуальный шмот скоро прибудет в Instagram.

Трекинг рук. У него столько вариантов использования! Советуем пробежаться по подобным линзам Snapchat, чтобы найти вдохновение. Spark AR работает над распознаванием жестов (пальцы и запястье), так что привет эффекты как в TikTok.

Niantic выпустили Lightship ARDK.

Niantic — это ребята, которые создали Pokémon Go. Платформа Lightship ARDK через интеграцию в Unity открывает разработчикам доступ к фичам, которыми раньше пользовался только Niantic. Это:
⏺ Real-Time Mapping.
Инструмент считывает пространство в радиусе 5-10 метров и за счет цвета создает его карту. Благодаря этому в AR опыте мяч будет отскакивать от стен, пола и закатится за диван.
⏺ Мультиплеер.
До 8 человек в одном AR-пространстве могут играть или проходить квесты. Вот это новый уровень для AR-приложений.
⏺ Semantic Segmentation.
Lightship сегментирует "естественные" объекты, что открывает много возможностей: от "покраски" объектов до интерактивного взаимодействия с ними. Для сегментации доступны небо, земля, искусственный газон, вода, здания и листва. Например, используя сегментацию неба, можно разместить объекты на горизонте, и их будут перекрывать деревья и дома.

Разрабатывать такие AR-опыты рекомендуется для iPhone 8 и старше и для Android смартфонов старше 2018 г.

8th Wall выпустил Reality Engine.

Reality Engine помогает создавать WebAR опыт, который будет доступен на смартфонах, планшетах, десктопе, AR и VR очках одновременно. Это сильно расширяет охватность проектов на 8th Wall, сохраняя при этом те же сроки на разработку опыта. Контент будет адаптироваться под каждую площадку автоматически, поэтому оптимизация для опыта не нужна.

Мы, честно говоря, не поняли зачем. Сценарии использования AR и VR технологий различаются и из-за этого контент будет разным. В гифке видно, что смысл голограммы теряется, как только его перемещают в VR или на десктоп. При этом в AR-очках голограмма будет крутой.

Посмотреть промо ролик.

Кейс: Голограммы звезд в Web AR Сбербанка.

Ждём много Сбербанка в медиапространстве, потому что банк празднует 180 лет. Проект СберТанцы - это Web AR на базе 8th Wall, в котором пользователь найдет голограммы a.k.a. волюметрик видео любимых исполнителей: Филипп Киркоров, Клава Кока, Вера Брежнева и др. Web AR создан для конкурса, в котором пользователь танцует вместе с голограммой выбранной селебы, выкладывает видео в соц. сети и выигрывает кучу призов. В призах, конечно, найдется и iPhone 13. У проекта крутое user journey и качественное волюметрик видео, снятое в собственной студии Сбера. Попробуйте опыт тут.

Пока нет новостей, подборка эффектов Instagram для вдохновения.

🔥 Puppet - эффект для чревовещателей :) https://www.instagram.com/ar/593326008661279/
🔥 Maestro - почувствуйте себя дирижером, в эффекте вы управляете руками мелодией. Багованный эффект (музыка может просто не играть), но с очень крутой идеей. https://www.instagram.com/ar/319920442913562/
🔥 4 милых эффекта для сети ТЦ в Сингапуре, которые украшают окружение к Рождеству.
https://www.instagram.com/ar/1063229364482579/
https://www.instagram.com/ar/393855688947972/
https://www.instagram.com/ar/287450849879793/
https://www.instagram.com/ar/388138132847121/
🔥 Speed Boxing - клевый пример использования трекера рук для развлечения + немного фитнеса для пользователей. https://www.instagram.com/ar/446938340137382
🔥 Классный эффект от NYX UK к коллекции Волшебник в стране OZ, где реализовали кликабельные элементы в сцене, которые ведут к тематическому макияжу https://www.instagram.com/ar/4516079241801622/
🔥 Holiday Challenge для Pandora, стандартная механика игры, но очень красивая реализация. https://www.instagram.com/ar/216870060502278/
🔥 Hit or miss, вовлекающий world effect, по сути тир :) https://www.instagram.com/ar/376877057457899/

Видео с эффектами в комментариях.

Станьте охотником за приведениями в AR-игре.

К выходу фильма "Охотники за привидениями: Загробная жизнь" Sony выпустили приложение Ghostbusters: Afterlife ScARe. Игра доступна на iOS и Android.
В игре пользователь выступает в роли охотника, который ловит призраков и решает головоломки. Игра разделена на "эпизоды", часть из которых игроку предлагается купить. 99 рублей по отдельности или 499 за полный "сезон".

Интерактив имитирует стандартные действия, которые человек совершает, когда пользуется смартфоном. Например, ответы на видеозвонки, уведомления о сообщениях. После общения с персонажем, игрок проходит короткое обучение и отправляется на первую миссию.

Если сравнивать с приложением Marvel к фильму "Вечные", то Охотники выигрывают с отрывом. Трейлер тут: https://youtu.be/c-m8-Xek6zQ
Интересно, как игра поможет фильму получить больше зрителей.
Скачать на iOS, скачать на Android.

Миссия-обучение длится около 5 минут, мы сделали скринкаст и порезали, чтобы вы посмотрели на геймплей.

Телеканал "Пятница!" запустит ремейк шоу "Alter Ego".

Адаптация шоу FOX появится на экранах в 2022 году. Напомним, что Alter Ego - это шоу в котором перед судьями выступают цифровые аватары артистов. Это открывает двери начинающим певцам - их не ограничивает возраст и пол, или то, что они не довольны своим внешним видом.
Мы будем следить за проектом, а пока посмотрите выступление из оригинального шоу.

Продано 10 миллионов VR гарнитур Oculus Quest 2.

Qualcomm - компания, которая разрабатывает решения для беспроводной связи. 16 ноября на презентации для инвесторов они объявили, что в сотрудничестве с Meta (a.k.a. Facebook) было продано 10 миллионов шлемов Oculus Quest 2. И это продажи за год - версия Oculus Quest 2 запущена в октябре 2020.

Успех продукта очевиден, отчасти из-за того, что он доступен для широкой аудитории (в рублях около 20к.).

Summit Scramble - первая кросс-платформенная игра 8th Wall.

8th Wall запустил Reality Engine 9 ноября и теперь представил игру, которая показывает, как этот инструмент работает. Напомним, что теперь Web AR опыт автоматически оптимизируется под разные платформы, и посмотреть контент можно со смартфона, компьютера и VR-гарнитуры.

В игру Summit Scramble можно играть как одному, так и нескольким людям одновременно в одном опыте. В ней аватар пользователя (который создается с помощью Ready Player Me) забирается на гору, преодолевая препятствия на время и соревнуется в количестве набранных монет с друзьями или за звание чемпиона мира в одиночной игре.
Попробуйте на разных устройствах: https://summitscramble.com/

Кейс: коллаборация REESE'S PUFFS и артиста KAWS.

KAWSPUFFS - это коллаборация бренда утренних хлопушек (ну шоколадных шариков, ладно) REESE'S PUFFS и артиста KAWS. Бренд выпустил лимитированную коробку для хлопушек в дизайне KAWS, с QR-кодом. Он отправляет покупателя в AR-игру, где заработанные очки помогут выиграть призы. Главный приз - коробка с хлопушками, подписанная артистом.

Игра простая - с неба падают шарики, которые надо лопать. Со временем скорость падения увеличивается, появляютcя другие элементы, которые лопать не стоит. Когда игра заканчивается пользователю предлагают скачать приложение, в котором еще больше игр и призов.
Красивый кейс, но назвать игру полноценным AR-опытом сложно. Поиграть самим можно тут, но для этого вам понадобится VPN (игра работает только на территории США) и фото коробки.