На конференции Adobe MAX 2023 традиционно показали пачку экспериментов с Adobe Firefly (раньше он назывался Sensei). И прокачали саму платформу алгоритмического дизайна:
 
1. Обновили базовую модель Firefly. Она научилась генерировать картинки в заданном стиле (нужно дать несколько примеров или выбрать из существующих рефов). Точнее генерирует людей и позволяет настраивать параметры «фотосъёмки». Помогает задавать правильные запросы (и предлагает подсказки). Ну и, само собой, даёт более лучшее качество.
 
2. Добавили векторную модель Firefly. Она помогает генерировать объекты, которые вписываются в стиль целевой иллюстрации, делает текстуры и градиенты, ну и правильно организует геометрию и слои.
 
3. Сделали модель Firefly Design. Она генерирует цельные редактируемые шаблоны (пока для их инструмента Adobe Express), которые адаптируются для разных сред вроде соцсетей или печати. Предлагает варианты текста, графики и композиции.
 
Кстати, недавно Firefly стал доступен через API в платформе NVIDIA Omniverse.
 
А вот свежие дикие штуки Adobe Sneaks:
 
#ProjectFastFill: Добавляет и удаляет объекты на видео таким же простым способом, то и Generative Fill.
 
#ProjectDraw&Delight: Превращает простейшие наброски рисунков в базовые контурные или полноцветные иллюстрации. Сюжет можно развивать и дополнять постепенно, менять позы персонажей, а также раскрашивать в духе недавнего запуска Illustrator Generative Recolor, ну и доделывать в самом Illustrator.
 
#ProjectNeo: Создаёт псевдо-трёхмерные иллюстрации с помощью простейших объектов. В примере делают архитектурный объект, который выглядит как векторная иллюстрация.
 
#ProjectSceneChange: Позволяет вставить персонажа из видео в любую другую сцену. Причём он докручивает оба видео, чтобы подходили друг к другу.
 
#ProjectPrimrose: Платье из простых текстур меняет цвет. Причём может делать анимацию из этого.
 
#ProjectGlyphEase: Создаёт шрифт на основе трёх знаков для примера, даже если это набросок на бумаге. И стилизует его в нужной технике, в том числе сверх-декоративной.
 
#ProjectPoseable: Генерирует наброски персонажей для сценарных раскадровок. Можно быстро настроить позу модели среди предложенных и описать нужный образ со сценой.
 
#ProjectResUp: Повышает разрешение видео маленького размера.
 
#ProjectDubDubDub: Генерирует дубляж видео или перевод аудио-записей на любой язык. Пытается вписаться в акустическое окружение сцены.
 
#ProjectStardust: Редактирует фото простым способом: переместить, добавить или убрать объекты, поменять одежду или дорисовать недостающую часть человека.
 
#ProjectSeeThrough: Убирает отражения и блики с фото, сделанных через стекло.
 
Скорость попадания этих набросков в основные продукты сильно выросла и в этом Adobe здорово уделывает хейтеров. И если в 2020 году тема почти сдулась, то сейчас снова тонна вдохновляющего.
 
#ai #algorithms #adobe #events

Продолжим новости с конференции Adobe MAX 2023 — что там нового во флагманских продуктах Creative Cloud:
 
Photoshop: Всё катанули ещё до мероприятия. В основной версии вышли из беты алгоритмические фукнкции Generative Fill и Generative Expand, упростилось удаление объектов. На iPad появился фильтр Camera Raw. А накануне дали доступ к браузерной версии с частью функциональности для всех.
 
Illustrator: Запустили бету для веба. В основной версии можно генерировать векторные иллюстрации по текстовому описанию через Firefly, накладывать графику на макет мерча с предложением перспективы (выросло из прошлогоднего концепта #ProjectVectorEdge), преобразовывать растровый текст в редактирумый, оптимизировать векторы.
 
Firefly: Доступен в вебе, работает на базе новой модели Firefly Image 2.
 
InDesign: В основной версии можно оформить большой кусок контента с помощью автостилизации на базе наборов стилей, встраивать Google Analytics, лучше контролировать экспорт.
 
Lightroom: В основной версии можно играть с глубиной на фото через инструменты размытия (тоже родом из экспериментов Sneaks).
 
AfterEffects: В основной версии новая Roto Brush лучше выделяет объекты на видео, прокачали работу с цветом и скриптами.
 
Express: Основная версия генерирует цельные редактируемые шаблоны, которые адаптируются для разных сред вроде соцсетей или печати. Предлагает варианты текста, графики и композиции. Переводит на 45 языков.

Premiere Pro: В основной версии можно искать по транскрипции текста и вырезать эти части из видео (прошлогодний эксперимент #ProjectBlink), подчищать качество диалогов, экономить время на цветокоре, плюс оптимизировали интерфейс таймлайна.
 
Fresco: В основной версии обновления вышли ещё в сентябре. Вертикальные тексты, улучшение экспорта видео, больше кистей.

Общий тюнинг в Animate и Character Animator.

Дикий крутяк то, что многие из алгоритмических нововведений основаны на экспериментах Adobe Sneaks, которые тизерили последние годы. Так что компания смогла наладить понятный путь реализации этих диких идей, а не просто хайпанула потешками.
 
#tools #adobe #events

Продолжим новости с конференции Adobe MAX 2024 — что там нового во флагманских продуктах Creative Cloud:

1. Photoshop: Новая функция Generative Workspace упрощает генерацию элементов и сцен для подачи дизайна. Можно быстро убрать визуальный мусор в изображении, сгенерировать похожие через функцию Generate Similar, удалить фон и сгенерировать новый. Появилась интеграция с Substance 3D для работы с трёхмерными объектами. Улучшена работа с цветом и добавлена поддержка вариативных шрифтов. Больше деталей и отдельно про версию для компьютеров.

2. Illustrator: Добавили функции Generative Shape Fill (генерирует детальную иллюстрацию по заданной форме) и Text to Pattern (можно настраивать плотность сгенерированных текстур), а также работу с 3D-изображением в векторном стиле через Project Neo. Появилась привязка объектов к линии (позволяет перемещать их всей группой), улучшена векторизация растровых изображений и генерация по текстовому запросу. Можно автоматически накладывать макеты этикеток на шаблоны мерча и упаковки, менять размер макета с автоматическим изменением иллюстрации. Контекстная панель инструментов. Больше деталей.

3. InDesign: Контекстная панель инструментов, генерация изображений и дорисовка их недостающей части, математические выражения через MathML, экспорт в HTML5, развитие поддержки accessibility. Больше деталей.

4. Lightroom: Можно убрать ненужные объекты с фото и организовать фото в авто-альбомы.

5. After Effects: Освежили интерфейс и усилили работу с 3D, включая интеграцию с Substance 3D. Можно смешивать двухмерные и трёхмерные объекты, импортировать анимацию 3D-объектов и докручивать её в инструменте, делать реалистичные и цветные тени, строить карты глубины. Появились новые пресеты анимации для инфографики, улучшена работа с текстом. Сильно качнули производительность.

6. Express: Массовое создание картинок на основе шаблона и таблицы с контентом, генерация недостающей части картинки, автоматическое переписывание и перевод текста, автоматическая анимация, таблицы и инфографика, перекраска макета для целостности, интеграция с Lightroom и InDesign. Больше деталей.

7. Project Concept: Экспериментальный инструмент для исследования визуальных идей. Можно собрать мудборд, а дальше скрещивать жанры найденного и делать наброски композиции. Картинки для мудборда можно добавлять, а можно — генерировать.

8. GenStudio: Цельный инструмент для работы с разными аспектами performance-маркетинга на базе алгоритмического дизайна. После загрузки библиотеки материалов и гайдлайнов бренда может генерировать баннеры и другие промо-материалы в разных разрешениях. А дальше — собирает аналитику по тому как они сработали и помогает доработать их. Его анонсировали весной, а сейчас запустили.

9. Premiere Pro: Освежили интерфейс и добавили функцию Generative Extend, которая может сгенерировать недостающие части видео (удлинить видео, смягчить переходы, дольше показывать определённые кадры). То же самое касается и аудио-дорожки (но не музыки). Ещё можно скорректировать движение глаз (например, если они бегают). В остальном интерфейсе улучшили работу с переходами и звуком, переработали работу с цветом, добавили автоматическую очистку шумов и вырезку слов-паразитов, упростили экспорт в ТикТок. Ну и заметно качнули производительность вообще и в работе с видео сверхвысокого разрешения (8K).

10. Frame.io: Крупное обновление приложения для компьютеров, iOS и iPadOS. Упрощают важные этапы работы над проектами: кастинг и прослушивание, поиск локаций, разбор отснятого за день материала и выгрузка с камер в облако, управление кампаниями.

Уже который год многое из алгоритмического новья — результаты экспериментов Adobe Sneaks. Причём всё чаще они попадают в рабочий продукт уже на следующий год, а не просто когда-то. Дизайнеры во многом по делу точат зуб на Adobe, но они были и остаются лучшей компанией, которая осмысленно внедряет алгоритмический дизайн в реально массовые инструменты. Сымаю шляпу очередной год подряд.

#tools #adobe #events