Команда Apple создала новую модель искусственного интеллекта, которая создает 3D-карты объектов из двумерных изображений заметно точнее существующих аналогов. Это может помочь компании не только в пост-обработке, например, фотографий, но также при работе в виртуальных трехмерных средах.

Новая модель ИИ называется Depth Pro и ее подробное описание доступно по ссылке. Depth Pro обещает быстро создавать комплексные 3D-карты из отдельных 2D-изображений. В аннотации к статье объясняется, что модель на процессоре потребительского класса может создать 2,25-мегапиксельную карту глубины из изображения за 0,3 секунды. Это важно, ибо отлично укладывается в парадигму Apple максимально много откручивать локально без передачи в облака.

Хотя те же айфоны могут создавать карты глубины с помощью набора датчиков и сенсора LiDAR, большинство неподвижных изображений не имеют сопутствующих данных о глубине реального мира. А они могут быть очень полезны для множества задач. Например, если нужно отредактировать только объект или придать сцене искусственное «линзовое» размытие, карта глубины поможет программному обеспечению создать точные маски. Модель карты глубины также может помочь при создании изображений искусственным интеллектом, поскольку глубокое понимание карт глубины может помочь модели синтеза получить более реалистичные результаты.

Как объясняют исследователи Apple, эффективная метрическая монокулярная модель оценки глубины должна быстро выдавать точные результаты высокого разрешения, чтобы быть полезной. Небрежная карта глубины не представляет особой ценности.

— Depth Pro создает метрические карты глубины высокого разрешения с высокочастотной детализацией при субсекундном времени работы. Наша модель достигает высочайшей точности оценки метрической глубины с нулевого снимка, не требуя метаданных, таких как характеристики камеры, и прослеживает границы окклюзии с беспрецедентной детализацией, что облегчает такие приложения, как синтез новых видов из отдельных изображений «в дикой природе»», — объясняют они. Тем не менее, команда признает некоторые ограничения, включая проблемы с полупрозрачными поверхностями и объемным рассеянием.

Помимо редактирования фотографий и синтеза новых изображений, модель карты глубины может оказаться полезной и для приложений дополненной реальности (AR), где виртуальные объекты должны быть точно размещены в физическом пространстве. Модель Depth Pro умеет работать как с относительной, так и с абсолютной глубиной.

В реальных продуктах Apple работу модели нам еще предстоит увидеть, но такое ощущение, что в Купертино сейчас параллельно делают две вещи: разрабатывают сам каркас работы с моделями через искусственный интеллект Apple Intelligence, а также попутно готовят сами локальные производительные модели под разные задачи. Возможно, в этом и будет основное конкурентное преимущество айфонов на горизонте 1-2 лет.

Погонять самостоятельно новую модуль можно по ссылке.

Эммм... Мы нисколько не ставим под сомнения компетенции бывшего промышленного дизайнера Apple Тома Уилсона, однако аккуратно заметим некую вторичность первого продукта его стартапа NUIO — клавиатуры Flow.

Фактически, он разорвал стандартную компактную клавиатуру (без цифрового блока) на две части. При этом весьма ловко назвал это экосистемой и продает в нагрузку также подставку под клавиатуру, подушечки под запястья и дополнительные «ноги» для более удобного расположения на столе.

Старая добрая эргономичная клавиатура Microsoft прямиком из 90-х годов всё это имела чуть ли не в комплекте.

Ну и ценник на Flow в 399 долларов не может спасти даже подсветка клавиш, чего мы давно просим от Apple.

Подробнее.

P.S. Как нам кажется, вот что бывает, когда дизайнер-божий одуванчик вылезает из своего пузыря в Купертино в реальный мир.

Вышла восьмая версия популярного и нашего любимого проигрывателя видео Infuse, который теперь в формате нативного приложения доступен и для гарнитуры Vision Pro. Строго говоря, это надо было сделать давно, потому что пока просмотр видео остается едва ли не ключевой фишкой этого «телевизора Apple за 3500 долларов».

Однако и пользователям других устройств Apple есть на что посмотреть в новой версии. В частности, переработан интерфейс как файл-менеджера (на Apple TV его надо включить в настройках приложения), так и управления воспроизведением, значительно ускорена работа с большими или распределенными по нескольким серверам библиотекам. Погоняли на нашем домашнем NAS, как будто бы пошустрее, да. Плюс быстрее синхронизация между статусами просмотра на нескольких устройствах. А вот с облачными хранилищами не заморачивались.

Пользователи седьмой версии, которые имеют на нее подписку, обновление получают бесплатно в рамках этой подписки. А если вы застряли на предыдущих релизах — вам разработчики дадут бесплатно год пользования новым приложением.

Перейти в App Store.

Весной мы рассказывали про проект Jonathan, который в конце 1984 года внутри Apple активно продвигала группа инженеров во главе с Джоном Фитчем. В рамках проекта предполагалось создать модульный компьютер, который можно было бы легко модернизировать или собирать разнообразные конфигурации под разные задачи.

В июне 1985 года проект был представлен руководящему составу Apple. Первой его реакцией было изумление. Милитаристский дизайн с гладкими поверхностями, острыми углами, вертикальными ребрами вокруг основания и использованием черного цвета с белой графикой был не похож ни на что, сделанное ранее в Apple.

Концепция Джонатана была признана слишком передовой и рискованной. Жан-Луи Гассе, который в то время был вице-президентом Apple по разработке, заметил, что им придется продать два или три "Джонатана", чтобы заработать столько же, сколько с одного Macintosh II. Генеральный директор Apple Джон Скалли высказал опасение, что Jonathan может стать настоящим трояном: когда Mac и DOS будут предлагаться на одной платформе, больше пользователей Apple перейдут на DOS, чем наоборот.

На днях Стивен Хеккет из 512Pixels.net получил письмо от читателя, родственник которого Том Тодман работал в 80-х годах Apple У него сохранилось письмо Фитча к Скалли, в котором тот разве аргументированно доказывал почему Apple надо создать всё же «Джонатана». И когда читаешь письмо, понимаешь, что годы идут, а многое остается неизменным. Тот же модульный компьютер может стать модульным телефоном, но маркетинг останется маркетингом...

Это сообщение предлагается вам в надежде, что вы согласитесь с тем, что значимость проекта Jonathan для долгосрочных целей Apple требует его завершения уже сейчас.

Сейчас — потому что у нас в сборе все знающие инженерные команды, знания. А еще «Джонатан» — отличный продукт.

JONATHAN - МОДУЛЬНОЕ РЕШЕНИЕ:

Очевидное отсутствие устаревания.

Этот дизайн устраняет страх, что компьютер устареет в следующем году. Это также устранит аналогичную причину колебаний — «я подожду, пока выйдет следующая модель». Возможности расширения системы намного превосходят рыночные предложения. Это отличный актив в местах продаж, особенно для серьезных пользователей, компаний с планами роста и частных лиц с растущим будущим.

Настоящий мультимастерный сопроцессинг. Правильная архитектура завтрашнего дня.

Гибкость конфигурации также выходит далеко за пределы рынка. Jonathan может быть загружен в любое сочетание текущего и будущего оборудования по выбору заказчика. Файловый сервер, рабочая станция и множество других специальных приложений теперь вполне жизнеспособны.

Быстрое внедрение нового оборудования

Стандартизированный дизайн продукта, производственная линия и конечная упаковка для CD-ROM, оптического магнитного диска, 80-мегабайтного диска и т.д. Закрытые периферийные карты являются желаемым преимуществом для большинства клиентов.

И главное...

Хотя мы должны реагировать на рынок, рынок никогда не подскажет нам, как внедрять инновации. Эти идеи рождаются здесь. Это наша репутация.

Дизайн продукции «Джонатана» и возможности, которые он предлагает, и есть инновация. Apple заслуживает победы только в том случае, если она попытается; только в том случае, если она рискнуть сделать ставку.

У маркетинга есть продукты, которые они хотят и которые им нужны в ближайшей перспективе, а у нас есть ресурсы и желание их разрабатывать — включая «Джонатана». Не было проведено никаких исследований рынка (как просили в сентябре), и Уэйн Дайер не представил никакого лучшего объяснения, кроме того, что другие продукты имеют наибольший смысл для маркетингового плана.

От имени нескольких ваших ключевых руководителей инженерного отдела и многих ваших преданных сотрудников, пожалуйста, рассмотрите возможности, обсудите их с нами и отделом маркетинга и дайте этому продукту шанс стать тем замечательным продуктом, которым мы его считаем.

Не могли бы вы обсудить потенциал этого продукта со мной, Джоном Фитчем и/или другими руководителями инженерного отдела?

Увы, не помогло.