В связи с тем, что DLSS 4.0 на основе трансформеров также был зарелизнут, многие работающие в графике задались вопросом как далеко всё это может продвинуться

Мало того, что мы скалируем 720p изображение в 1080p/4K, и вместо "16 путей света/пиксель семплируем лишь 1", так теперь еще и предсказываем аж 3 кадра во временном пространстве

Тем самым ИИ предсказывает аж 15 пикселей из 16, или же 240 путей света из 256 🤯

Где предел? Да чёрт его знает 😅, но я бы смотрел через призму Neural Scale Law, утверждающего что в определенный момент придется делать DLSS в 10х тяжелее, чтобы качество выросло аж на 10% (см. графики)

Очевидно Нвидиа использует многие ИИ-хаки (Дистилляция, Квантизация), чтобы эти кривые роста костов немного сместить, но подход не долгосрочный и до 1 битной точности осталось небольшое окно (сейчас 4-8 бит afaik)

Чего с этими знаниями делать? Да пусть каждый решает сам, но важно держать данный контекст если задумываетесь как можно еще сильнее графон продвинуть вперёд)

#ии #графон #индустрия

Интересный анализ по Nvidia от Epoch AI

Там очень много данных, советую самому в них покопаться. там найдете супер полезные инсайды если вы занимаетесь ресерчерем, строите бизнес, инвестируете или просто вам полезно знать куда движутся тренды

То, что я нашел для себя довольно интересным:

1️⃣ Начиная с 2019 в среднем хватает всего 10ти месяцев для удвоению введенных в эксплуатацию Compute GPU FLOPS во всем мире

2️⃣ Соответственно в среднем годовой рост составляет 2.3х, в то же время спрос на вычисления для обучения фронтирных моделей растет в 4-5х -> "упираемся" в скалируемость по железу

3️⃣ В среднем переход от FP32 к INT8 дал 12х буст в compute - а не 4x как можно было бы предположить. У H100 разница вообще в 59 раз 🤯

4️⃣ Компьют дешевеет на 30%/год. Стоимость человеческого труда же только растет...

#индустрия #ии

Рендер-движки — всё? конечно нет, но:
Команда из Стэнфорда представила новый бенчмарк WorldScore, позволяющий оценивать модели генерации и рендера миров по таким критериям, как:
1️⃣ управляемость камерой
2️⃣ манипуляция объектами в сцене
3️⃣ темпоральная стабильность
4️⃣ консистетность проекции
.. и множество других

Как видно по результатам абсолютно все модели еще далеки от качественных результатов.

Имхо, штука поможет немного сбавить процент ненаучных тейков и более спокойно оценить траекторию прогресса в данном направлении!

P.s. идейно можно соединить с каким-то UE5 для доп. валидации на 100%-точно предсказываемых манипуляциях...

#графика #ии #статья