Метаверсище и ИИще
46.7K subscribers
5.93K photos
4.34K videos
45 files
6.81K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergeyTsyptsyn
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Roblox Cube: Вы будете смеяться, но у нас новый 3Д-генератор.

И знаете от кого?

От Роблокса!

И да, они обещают код.

Пока text-to-3Д, потом на входе картинки.

Амбиции очень серьезные:

"Мы хотим, чтобы создаваемые нами 3D-объекты и сцены были полностью функциональными. Мы называем это 4D-творением, где четвертое измерение — это взаимодействие между объектами, средами и людьми. Достижение этого требует способности не только создавать захватывающие 3D-объекты и сцены, но и понимать контексты и отношения между этими объектами. Именно к этому мы и направляемся с Cube.

Помимо этого первого варианта использования генерации сетки, мы планируем расширить генерацию и понимание сцен. Мы сможем обслуживать пользователей тем опытом, который им наиболее интересен, и дополнять сцены, добавляя объекты в контексте. Например, в опыте с лесной сценой разработчик может попросить Assistant заменить все пышные зеленые листья на деревьях осенней листвой, чтобы обозначить смену сезона. Наши инструменты AI Assistant реагируют на запросы разработчика, помогая им быстро создавать, адаптировать и масштабировать свой опыт.

Мы поделимся обновлениями и новыми функциями, продолжая улучшать и расширять нашу базовую модель. До тех пор мы надеемся, что вам понравится использовать и строить поверх нашей версии модели Cube 3D с открытым исходным кодом, которая будет доступна позже на этой неделе."

Их главное преимущество - нереальных размеров датасет, и тонна метаданных вокруг их моделей.

Ждем кода и подробностей, а пока почитайте тут:

https://corp.roblox.com/newsroom/2025/03/introducing-roblox-cube

@cgevent
🔥49👍168👎3😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Новый видео генератор в Grok

В январе Маск уже поминал, что через несколько месяцев они сделают видеогенератор. А вчера CEO Hotspot твитторнул, что их полностью покупает xAI.
Hotspot это малопримечательый видеогенератор, про который я как-то упоминал. У них своя база пользователей, но на фоне Клинга и Минимакса - это игрок второго плана(скорее по фичам, а не по качеству).
Зато теперь у них будет доступ к кластеру Маска - Colossus. И тренировка видео-модели может пойти иными темпами.
Тем временем Hotspot закрывает все генерации на своем сате и предлагает скачать свои гениальные видосы до 30 марта.

Конкуренция - это прекрасно. А зная Маска\Грок, наверняка новая видеомодель будет не такая пугливая и ханжеская как Sora или Veo2.

Ждем.
https://techcrunch.com/2025/03/17/elon-musks-ai-company-xai-acquires-a-generative-ai-video-startup/
@cgevent
👍42🔥194
3Дай Студио

Сегодня у нас 3Д-марафон. На дворе GDC, много апдейтов.

Для начала принес вот такой комбайн. Он сегодня еще будет фигурировать в тестах 3Д генераторов, как один из лучших.

Тут ребята развернулись не на шутку. 3Д-вьюпорт, text-to-3D, image-to-3D, Remesh AI и даже упоминания про Video AI.
И прямой коннект с Блендором.

Выглядит действительно неплохо, хороший конкурент Rodin Pro.

Бесплатного плана нет, а базовый выглядит дороговато 40 центов за одну генерацию (16 евро в месяц за 40 генераций).

Ремешер я не смог попробовать, хотя он как бы бесплатный, нужно навалить кредитов на баланс, чтобы появился Экспорт.

И у них свои 3Д-нейромодели из который Prism выглядит как самая продвинутая.

В общем, еще один игрок на рынке закрытых 3Д-генераторов.

https://www.3daistudio.com/

@cgevent
👍12🔥7👎21
А тем временем Хуньянь обновил свой 3Д-генератор.

Теперь там две модели.
2mini - 0.6B параметров, но генерит шустрее и лучше, чем предыдущая модель на 1.1B параметров.
2mv - multiview, генерация по нескольким картинкам (до 4 штук) с текстурированием.

Требования к памяти такие:
It takes 6 GB VRAM for shape generation and 12 GB for shape and texture generation in total with cpu offloading.

Все можно скачать и установить локально.
https://github.com/tencent/Hunyuan3D-2

Более того, есть демо-спейсы для тестирования:

https://huggingface.co/spaces/tencent/Hunyuan3D-2mv

https://huggingface.co/tencent/Hunyuan3D-2mini

@cgevent
23🔥21👍12
This media is not supported in your browser
VIEW IN TELEGRAM
Нейромоделинг, нейрориг, нейромокап плюс Unreal Engine (тут скоро будет нейрорендер).

Роден сгенерировал 3D-модель Патрика Стара, автоматически заригал ее, потом импорт в UE, где она была санимирована в реалтаймовом нейромокапе CYAN AI.
Понятно, что криво-косо, но это 5 минут вместо недели. И это пока.

Кнопка "сделать красиво" все ближе

@cgevent
🔥42👍11😁61
Рендер или видео?
Ускорено или нет?

Рендер - 👍
Видео - 🔥

Китайцы из EngineAI, конечно, приподзажигают со своими робатами.

А мы тут такие, 3Д генераторы, Wonder Dynamics, все дела..

@cgevent
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
36🔥131👍344
This media is not supported in your browser
VIEW IN TELEGRAM
Помните старый фильм Живая сталь (Real Steel, 2011)?

Сколько интересно был бюджет на графику\аниматронику.

А сейчас можно взять робата из предыдущего поста и просто снять, а потом ускорить. 😄

@cgevent
👍264
This media is not supported in your browser
VIEW IN TELEGRAM
ИИ идет по спирали.

Когда-то у Диснея еще в 2018(!!) году была удивительная работа (Cardinal AI) по конвертации сценариев(сторибордов) прямо в анимацию, а не в статичные модели. Они обновили ее в 2019 году (ссылка), и там это выглядело не только как построение лэйаутов, а еще и генерация анимации. И да, все это работало на основе библиотеки моделей, откуда таскались ассеты.

А теперь поглядите куда мы пришли со связкой Блендор + Клод + MCP.

На прошлой неделе Клод моделил самолетики и мебель, а сейчас смышленые парни прикрутили туда 3Д-сток с модельками, чтобы он не мучился, а таскал ассеты оттуда.
Вы просто покрутите видео и поглядите как импортируются текстуры, модели и хдри. И создается сцена с пляжем

И вот тут пора расчехляться Шаттерстоку...

Проматываем вперед: стоки забиты сгенерированными текстурами и 3Д-моделями, над ними парит Блендор, который на стероидах Клода, быстро собирает лего в соответствии с промптами (нет, не юзера, а) LLM, которая переводит хотелки заказчика в нужные промпты.
А Блендор нейрорендерит все это под нужный стиль..

@cgevent
4🔥64👍123
Квази-3Д-генерация. И квази-ретопология.

Берете картинку, открываете Google AI Studio (бесплатно), берете модель 2.0 Flash или 2.0 Flash Thinking, даете ей на вход свою картинку и просите:
edit this image to generate with Imagen3 a 3d wireframe representation (as image) of every unique object and subject in this scene. it should look like a blender 3d viewport with wireframe mode turned on.


Гугл выдает вам, грубо говоря, wireframe render.

Он сам сегментирует объекты, честно пытается представить их топологию в 3Д и выдает вам варианты.

Скажу заранее, вам придется с ним как следует поругаться, прежде чем он что-то начнет выдавать. Например, сначала попросите сгенерить просто любую картинку.

Еще раз, это просто 2Д-картинка. Тут нет 3Д модели.

Но очень интересно смотреть, как он "понимает" сцену.

Я сгенерил бутылку на столе(первая картинка) - сцена простая, но вы можете его помучить на более сложных сценах. Обратите внимание на топологию стола и окна на второй картинке.

@cgevent
223👍18😁3
Заканчиваем 3Д-марафон эпическим сравнением 3Д-генераторов.

От самого Энди Прайса - Блендор Гуру.

Поглядите картинки, они красноречивы сами по себе.
Там правда есть момент, Энди не юзал Rodin Pro, за что ему насовали в коментах. Потом исправился, но не на всех тестах.

А я просто переведу твит Энди, так как сильно согласен с ним насчет редакитруемости и топологии.

Несколько тестов, чтобы понять, стоит ли художникам беспокоиться об искусственном интеллекте.

Честно говоря, ИИ стал очень хорош (особенно Prism:
https://3daistudio.com). Но редактирование еще долго будет оставаться его главной проблемой. Кашеобразные(messy) сетки означают, что даже небольшие исправления требуют дорогостоящего ретопа.

Лучше всего ИИ справляется с непрозрачными, гладкими формами, которые часто встречаются в датасетах (автомобили, люди и т.д.), и хуже всего - со сложными объектами с мелкими деталями (деревья и т.д.)

Один из навыков, который будет очень ценен в будущем, - это ретоп и текстурирование. Если вы хотите повысить квалификацию, изучите любой существующий сегодня рабочий процесс по очистке фотограмметрии, потому что это, по сути, одно и то же.

Или сосредоточьтесь на "hero assets". Все, что находится близко к камере, должно быть точным, а AI-модели таковыми не является.

К игровым активам также предъявляются гораздо более сложные требования (UV-пространство, герметичные сетки, оптимизированные шейдеры), и я сомневаюсь, что ИИ сможет решить это в течение некоторого времени.


https://x.com/andrewpprice/status/1901678647850717638

@cgevent
🔥34👍155😱2