На конференции Adobe MAX 2023 традиционно показали пачку экспериментов с Adobe Firefly (раньше он назывался Sensei). И прокачали саму платформу алгоритмического дизайна:
 
1. Обновили базовую модель Firefly. Она научилась генерировать картинки в заданном стиле (нужно дать несколько примеров или выбрать из существующих рефов). Точнее генерирует людей и позволяет настраивать параметры «фотосъёмки». Помогает задавать правильные запросы (и предлагает подсказки). Ну и, само собой, даёт более лучшее качество.
 
2. Добавили векторную модель Firefly. Она помогает генерировать объекты, которые вписываются в стиль целевой иллюстрации, делает текстуры и градиенты, ну и правильно организует геометрию и слои.
 
3. Сделали модель Firefly Design. Она генерирует цельные редактируемые шаблоны (пока для их инструмента Adobe Express), которые адаптируются для разных сред вроде соцсетей или печати. Предлагает варианты текста, графики и композиции.
 
Кстати, недавно Firefly стал доступен через API в платформе NVIDIA Omniverse.
 
А вот свежие дикие штуки Adobe Sneaks:
 
#ProjectFastFill: Добавляет и удаляет объекты на видео таким же простым способом, то и Generative Fill.
 
#ProjectDraw&Delight: Превращает простейшие наброски рисунков в базовые контурные или полноцветные иллюстрации. Сюжет можно развивать и дополнять постепенно, менять позы персонажей, а также раскрашивать в духе недавнего запуска Illustrator Generative Recolor, ну и доделывать в самом Illustrator.
 
#ProjectNeo: Создаёт псевдо-трёхмерные иллюстрации с помощью простейших объектов. В примере делают архитектурный объект, который выглядит как векторная иллюстрация.
 
#ProjectSceneChange: Позволяет вставить персонажа из видео в любую другую сцену. Причём он докручивает оба видео, чтобы подходили друг к другу.
 
#ProjectPrimrose: Платье из простых текстур меняет цвет. Причём может делать анимацию из этого.
 
#ProjectGlyphEase: Создаёт шрифт на основе трёх знаков для примера, даже если это набросок на бумаге. И стилизует его в нужной технике, в том числе сверх-декоративной.
 
#ProjectPoseable: Генерирует наброски персонажей для сценарных раскадровок. Можно быстро настроить позу модели среди предложенных и описать нужный образ со сценой.
 
#ProjectResUp: Повышает разрешение видео маленького размера.
 
#ProjectDubDubDub: Генерирует дубляж видео или перевод аудио-записей на любой язык. Пытается вписаться в акустическое окружение сцены.
 
#ProjectStardust: Редактирует фото простым способом: переместить, добавить или убрать объекты, поменять одежду или дорисовать недостающую часть человека.
 
#ProjectSeeThrough: Убирает отражения и блики с фото, сделанных через стекло.
 
Скорость попадания этих набросков в основные продукты сильно выросла и в этом Adobe здорово уделывает хейтеров. И если в 2020 году тема почти сдулась, то сейчас снова тонна вдохновляющего.
 
#ai #algorithms #adobe #events

Продолжим новости с конференции Adobe MAX 2023 — что там нового во флагманских продуктах Creative Cloud:
 
Photoshop: Всё катанули ещё до мероприятия. В основной версии вышли из беты алгоритмические фукнкции Generative Fill и Generative Expand, упростилось удаление объектов. На iPad появился фильтр Camera Raw. А накануне дали доступ к браузерной версии с частью функциональности для всех.
 
Illustrator: Запустили бету для веба. В основной версии можно генерировать векторные иллюстрации по текстовому описанию через Firefly, накладывать графику на макет мерча с предложением перспективы (выросло из прошлогоднего концепта #ProjectVectorEdge), преобразовывать растровый текст в редактирумый, оптимизировать векторы.
 
Firefly: Доступен в вебе, работает на базе новой модели Firefly Image 2.
 
InDesign: В основной версии можно оформить большой кусок контента с помощью автостилизации на базе наборов стилей, встраивать Google Analytics, лучше контролировать экспорт.
 
Lightroom: В основной версии можно играть с глубиной на фото через инструменты размытия (тоже родом из экспериментов Sneaks).
 
AfterEffects: В основной версии новая Roto Brush лучше выделяет объекты на видео, прокачали работу с цветом и скриптами.
 
Express: Основная версия генерирует цельные редактируемые шаблоны, которые адаптируются для разных сред вроде соцсетей или печати. Предлагает варианты текста, графики и композиции. Переводит на 45 языков.

Premiere Pro: В основной версии можно искать по транскрипции текста и вырезать эти части из видео (прошлогодний эксперимент #ProjectBlink), подчищать качество диалогов, экономить время на цветокоре, плюс оптимизировали интерфейс таймлайна.
 
Fresco: В основной версии обновления вышли ещё в сентябре. Вертикальные тексты, улучшение экспорта видео, больше кистей.

Общий тюнинг в Animate и Character Animator.

Дикий крутяк то, что многие из алгоритмических нововведений основаны на экспериментах Adobe Sneaks, которые тизерили последние годы. Так что компания смогла наладить понятный путь реализации этих диких идей, а не просто хайпанула потешками.
 
#tools #adobe #events

Год в дайджесте традиционно стартует переписи крутячки (или шизячки) с выставки CES 2024 — она прошла с 9 по 12 января в Лас-Вегасе. Всё, что имеет прямое или косвенное отношение к интерфейсам:
 
ОЧКИ И ШЛЕМЫ
1. Ноутбук без монитора Spacetop.

2. Очки ASUS AirVision M1 специализируются на дополнительных рабочих столах для многозадачности.

3. Очки Nendo ViXion01 помогают фокусировать взгляд людям с нарушением зрения.

4. Очки Xreal Air 2 Ultra.

5. Очки Sony для профессиональной деятельности.

6. Бинокль Swarovski распознаёт породы животных и птиц.

СКЛАДНЫЕ ЭКРАНЫ
1. Монитор ASUS ZenScreen Fold.

2. Обновление ноутбуков ASUS Zenbook Duo и Lenovo Yoga Pro 9i.

КОМПЬЮТЕРЫ
1. NPU-процессоры (Neural Processing Unit) упрощают обработку нейросетями на устройстве аналогично тому, как это раньше сделали GPU. Их представили AMD, много устройств на Intel AI Boost (LG Gram, Acer).

2. Процессор Snapdragon XR2+ оптимизирует работу с виртуальной и дополненной реальностью.

3. Microsoft добавляет кнопку Copilot в свой стандарт клавиатур для Windows. Это сильное заявление -- в последний раз они делали это 30 лет назад с кнопкой Windows.

ТЕЛЕФОНЫ
1. Корпус меняет цвет.

2. Клавиатура Clicks а-ля Blackberry для iPhone.

3. Подставка Belkin следит за вашим движением и поворачивает телефон для съёмки.
 
ПЛАНШЕТЫ
1. TLC NXTPAPER 14 Pro превращается из полноцветного планшета в читалку электронных книг и обратно.
 
ТВ
1. Беспроводной прозрачный LG.

2. Прозрачный Samsung на MicroLED выглядит почти как голограмма.

3. Проектор Samsung делает интерактивное изображение, которым можно управлять как сенсорным экраном.

4. Монитор Samsung ограниченно работает и без компьютера (видео-звонки, кино, облачные игры).

5. ТВ LG с ИИ-процессором улучшают качество картинки.

6. Монитор HP Omen Transcend упрощает управление двумя экранами.

7. ТВ станут частью умного дома Google Home и Samsung.
 
8. 57" изогнутый монитор Acer.

АВТО
1. Голосовые помощники прокачивают через OpenAI (TomTom и Microsoft, Volkswagen) и Amazon (BMW).

2. Sony Afeela управляли джойстиком от PlayStation.

3. Коллаб Mercedes и will.i.am подстраивает музыку под ситуацию на дороге и стиль вождения.

НОСИМЫЕ УСТРОЙСТВА 
1. Больше чехлов для беспроводных наушников с экраном.

2. Кольцо WHSP Ring позволяет управлять умным ассистентом с помощью шёпота.

3. Наушники OrCam Hear фильтруют звуковое окружение и оставляют только то, что нужно услышать.

4. Наушники Mojawa с ИИ-тренером.

5. Маска для лица Skyted глушит громкость голоса.

6. Перчатка GyroGlove помогает людям с тремором держать руки ровно.
 
АССИСТЕНТЫ
1. Милейший квадрат Rabbit R1 с дизайном от Teenage Engineering позволяет общаться голосом и показывает результат на маленьким экране.

2. Новая версия мини-бота Samsung Ballie умеет проецировать изображения.
 
УМНЫЙ ДОМ
1. Обновлённая деревянная сенсорная панель Mui.

2. Дверной замок Philips сканирует ладонь без касания для входа, а Lockly — лицо.

3. Развитие стандарта Bluetooth: Auracast позволит передавать звук сразу на несколько устройств.

4. Коллаб Samsung, Tesla и Hyundai вокруг платформы.

5. Фоновое освещение Govee можно настраивать через ИИ-чатбот, а Nanoleaf синхронизируется с музыкальным проигрывателем.

6. Велотренажёр LifeSpan для домашнего офиса позволяет работать за компьютером и заряжать телефон.
 
КРЕЙЗОТА
1. Мини-колёса для обуви Moonwalkers, которые делают шире шаг.

2. Управление телефоном с помощью языка для людей с ограниченными возможностями.

3. Audio Radar дублирует звук светом для слабослышащих.

4. Кошачья дверь сканирует добычу животного и не пускает котов с мёртвой мышью в зубах.

5. Aroma Shooter поддерживает просмотр видео тематическим запахом.

6. Беспроводная зарядка телефона на расстоянии 20 см.

7. Традиционный туалетный юмор от Kohler — унитаз с голосовым управлением (в следующем году там будет ChatGPT).
 
В этом году интересного и необычного много, так что CES удался.
 
#ces #trends #events

В понедельник прошла ежегодная WWDC, выставка новых операционок Apple. Интерфейсных обновлений особо нет, в основном развитие самой оболочки и ключевых приложений. Если выделять какие-то вещи, то вот что:

iOS 18
ИИ-платформа Apple Intelligence на базе OpenAI, включая сам ChatGPT. Можно будет переписывать, вычитывать или суммировать тексты в любых приложениях; генерировать изображения в виде скетчей, иллюстраций и анимации (но без фотореалистичных). Искать по фото и в браузере. Правда, работать это будет только на самых свежих моделях iPhone.

Siri сильно прокачана и интегрирована в приложения — сможет редактировать фото, дописывать сообщения электронной почты, ранжировать уведомления по важности, кратко пересказывать новости, заполнить форму данными с фото документа (и даже самостоятельно найти его в галерее).

В будущем они могут добавить выбор языковой модели — например, Google Gemini.

Самая сомнительная вещь — жёсткая настройка домашнего экрана, где пользователь может перекрасить все иконки и расставить их как попало (или взять основной цвет фоновой картинки, что тоже убого). Явно не та вещь, которую нужно брать из Android — мистер Джобс крутится в гробу, а сэр Айв пьёт запойно после такого. Система иконок Apple никак не предназначена для этого и выглядит итог максимально чипово. В общем, океан кровавых слёз дизайнеров ожидается уже скоро.

В контрольном центре можно добавить кнопки от сторонних приложений (и вынести конкретные кнопки в нижних углах экрана блокировки).

В сообщениях можно будет сгенерировать эмоджи (Genmoji) под текст сообщения. Поддержка стандарта RCS, который потенциально позволит полноценно переписываться с пользователями Android в iMessage.

Сделали редизайн стандартных приложений фото и здоровье. Запустили отдельное приложение для паролей.

Можно будет перевести деньги через просто касание другого устройства Apple.

Появилась запись и расшифровка телефонных разговоров.

Дополнительная поддержка accessibility. Управление взглядом, голосовые "горячие клавиши", борьба с укачиванием при работе с телефоном в машине. Можно не говорить, а писать сообщения Siri.

В плане безопасности: вход в конкретные приложения только по FaceID или пин-коду, а также отдельные закрытые папки приложений.

AirPods смогут распознать, что вы качнули головой «да» или «нет».

Отдельный игровой режим, в котором фоновые приложения меньше отсвечивают.

Apple ID переименовали в Apple Account.

iPadOS 18
Во-первых, аналогичные возможности Apple Intelligence, дикой настройки главного экрана и т.п.

Во-вторых, наконец-то появится калькулятор. Причём не зря ждали — может распознавать и считать рукописные формулы.

Улучшает качество рукописного текста и может написать им любой текст.

Вкладки внутри приложения могут быть полупрозрачными поверх контента.

watchOS 11
Много обновлений в конкретных способах отслеживания здоровья и развитие ленты виджетов Smart Stack. Отдельное приложение-переводчик.

Прокрутка экрана без касания пальцами — просто по двойному нажатию большого и указательного.

macOS Sequoia:
Можно управлять телефоном с компьютера, перетаскивать объекты между устройствами, получать уведомления с телефона на компьютере.

Быстрая расстановка приложений на экране как в Windows.

Замена фона в звонках на уровне ОС, т.е. в любом приложении.

visionOS 2
Фото с «глубиной» — при повороте головы видно что там за краями. Редактирование пространственных видео в Final Cut Pro

Развитие системы жестов — быстрый возврат на главный экран, вызов панели управления, уведомлений и статуса батареи / времени.

Виртуальный монитор Mac Virtual Display, сопоставимый с двумя 4K-мониторами.

Можно передавать изображение с устройств Vision через AirPlay.

Само устройство начнут продавать вне США.

tvOS 18
Функция InSight показывает информацию об актёрах прямо во время просмотра.

Традиционно всё это появится у массового пользователя в сентябре. Но бета-версия будет доступна в июле, а разработчики могут поставить её уже сейчас.

#ios #trends #events

Продолжим новости с конференции Adobe MAX 2024 — что там нового во флагманских продуктах Creative Cloud:

1. Photoshop: Новая функция Generative Workspace упрощает генерацию элементов и сцен для подачи дизайна. Можно быстро убрать визуальный мусор в изображении, сгенерировать похожие через функцию Generate Similar, удалить фон и сгенерировать новый. Появилась интеграция с Substance 3D для работы с трёхмерными объектами. Улучшена работа с цветом и добавлена поддержка вариативных шрифтов. Больше деталей и отдельно про версию для компьютеров.

2. Illustrator: Добавили функции Generative Shape Fill (генерирует детальную иллюстрацию по заданной форме) и Text to Pattern (можно настраивать плотность сгенерированных текстур), а также работу с 3D-изображением в векторном стиле через Project Neo. Появилась привязка объектов к линии (позволяет перемещать их всей группой), улучшена векторизация растровых изображений и генерация по текстовому запросу. Можно автоматически накладывать макеты этикеток на шаблоны мерча и упаковки, менять размер макета с автоматическим изменением иллюстрации. Контекстная панель инструментов. Больше деталей.

3. InDesign: Контекстная панель инструментов, генерация изображений и дорисовка их недостающей части, математические выражения через MathML, экспорт в HTML5, развитие поддержки accessibility. Больше деталей.

4. Lightroom: Можно убрать ненужные объекты с фото и организовать фото в авто-альбомы.

5. After Effects: Освежили интерфейс и усилили работу с 3D, включая интеграцию с Substance 3D. Можно смешивать двухмерные и трёхмерные объекты, импортировать анимацию 3D-объектов и докручивать её в инструменте, делать реалистичные и цветные тени, строить карты глубины. Появились новые пресеты анимации для инфографики, улучшена работа с текстом. Сильно качнули производительность.

6. Express: Массовое создание картинок на основе шаблона и таблицы с контентом, генерация недостающей части картинки, автоматическое переписывание и перевод текста, автоматическая анимация, таблицы и инфографика, перекраска макета для целостности, интеграция с Lightroom и InDesign. Больше деталей.

7. Project Concept: Экспериментальный инструмент для исследования визуальных идей. Можно собрать мудборд, а дальше скрещивать жанры найденного и делать наброски композиции. Картинки для мудборда можно добавлять, а можно — генерировать.

8. GenStudio: Цельный инструмент для работы с разными аспектами performance-маркетинга на базе алгоритмического дизайна. После загрузки библиотеки материалов и гайдлайнов бренда может генерировать баннеры и другие промо-материалы в разных разрешениях. А дальше — собирает аналитику по тому как они сработали и помогает доработать их. Его анонсировали весной, а сейчас запустили.

9. Premiere Pro: Освежили интерфейс и добавили функцию Generative Extend, которая может сгенерировать недостающие части видео (удлинить видео, смягчить переходы, дольше показывать определённые кадры). То же самое касается и аудио-дорожки (но не музыки). Ещё можно скорректировать движение глаз (например, если они бегают). В остальном интерфейсе улучшили работу с переходами и звуком, переработали работу с цветом, добавили автоматическую очистку шумов и вырезку слов-паразитов, упростили экспорт в ТикТок. Ну и заметно качнули производительность вообще и в работе с видео сверхвысокого разрешения (8K).

10. Frame.io: Крупное обновление приложения для компьютеров, iOS и iPadOS. Упрощают важные этапы работы над проектами: кастинг и прослушивание, поиск локаций, разбор отснятого за день материала и выгрузка с камер в облако, управление кампаниями.

Уже который год многое из алгоритмического новья — результаты экспериментов Adobe Sneaks. Причём всё чаще они попадают в рабочий продукт уже на следующий год, а не просто когда-то. Дизайнеры во многом по делу точат зуб на Adobe, но они были и остаются лучшей компанией, которая осмысленно внедряет алгоритмический дизайн в реально массовые инструменты. Сымаю шляпу очередной год подряд.

#tools #adobe #events

В понедельник прошла ежегодная WWDC, выставка новых операционок Apple. Последние годы были про инкрементальные улучшения, но на этот раз выкатили сверх-яркий стилёвый взрыв.

Большие визуально-интерактивное обновление назвали «жидкое стекло» и это одно из ярчайших явлений в профессии за последние годы. «Liquid glass» — динамический материал, который используется для элементов управления и панелей. Логика сборки экранов при этом не сильно поменялась, но по факту это сильно больше, чем просто тема оформления.

Первая реакция у меня и многих обсуждающих этот дроп — откопали виртуальные тренды «стекломорфизм» и «нейроморфизм» прошлых лет, с опозданием скопировали Microsoft Fluent Design и вообще вернули 2007 с Windows Vista, а то и хуже — оттёрли нафталин с MacOS Aqua.

Но потом я посмотрел официальные дизайнерские видео про этот визуальный язык и 20 минут сидел с открытым ртом.
1. Сам материал гораздо сложнее простого матового стекла, даже красиво обрабатывающего цветовые пятна в духе теликов с фоновой подсветкой. Физика преломления света сложная, ближе именно к воде.
2. Это интерактивный брендинг, предназначенный для интерфейсов — а они постоянно находятся в микро- и макро-движении. И тут эта магия преломлений гипнотизирует.
3. Реакция на нажатие вообще с другой планеты — материал деформируется.
4. Панели умеют в мягкие размытие и смену цвета текста плюс иконок в зависимости от фона.
5. Элементы вне фокуса становятся визуально проще, чтобы не отвлекать.
6. Жидкое стекло может краситься в цвет темы оформления и это отдельная магия карамелек.

Самый шик — всё это сложное поведение зашито в стандартные компоненты (звук падающей челюсти). И это также топовый реф стратегии ребрендинга — не ломая компоновку экранов, они получают новую стилистическую жизнь. Впечатляет, что технологии дозрели то такого уровня, что такой сложный и графичный стиль масштабируется на разные экраны и размеры без потуг.

Приземление пока хромает — в реальных демках есть very somnitelnie resheniya или вообще лубок. Бесконечно уродливая идея с тематизацией иконок стала ещё позорнее. Хотя тот же iOS 7 был сыроват на старте, но за пару лет превратился в лучшую версию себя.

Я никогда не был эпловым фанбоем и прагматично отношусь к их анонсам. Но для меня это одно из ярчайших событий в профессии за последние годы. И абсолютно новая планка того, что возможно в интерактивном брендинге, массовых цифровых продуктах и дизайн-системах в целом.

Дизайн-сообщество уже вовсю изучает, как это всё устроено и пытается повторить кнопки и поверхности в Figma. А вот официальные гайдлайны:
— Обновлённые общие и раздел про материалы
— Внедрение жидкого стекла для разработчиков

iOS 26
(Снова) редизайн приложения фото.

Полезные видео для дизайнеров:
— Get to know the new design system
— Say hello to the new look of app icons
— Design interactive snippets
— Create icons with Icon Composer
— What’s new in SF Symbols 7
— Design foundations from idea to interface
— Make a big impact with small writing changes
— Principles of inclusive app design
— Evaluate your app for Accessibility Nutrition Labels
— Customize your app for Assistive Access

Победители Apple Design Awards.

iPadOS 26
Планшет стал ещё ближе к компьютеру (хотя с ограничениями операционки это всё равно утыкается во много стен): меню и замусоренный окнами рабочий стол как на MacOS. Некогда анти-компьютер с более простым взаимодействием навернул борща, оставшись в рамках ограничений своего форм-фактора.

Полезные видео:
— Elevate the design of your iPad app

watchOS 26
Можно управлять уведомлениями с помощью поворота запястьем.

macOS Tahoe
Полезные видео:
— Make your Mac app more accessible to everyone

visionOS 26
Прокрутка глазами, поддержка контроллеров плойки.

Полезные видео:
— Design widgets for visionOS
— Design hover interactions for visionOS

Традиционно всё это появится у массового пользователя в сентябре. Но бета-версия будет доступна в июле, а разработчики могут поставить её уже сейчас.

#ios #trends #events