Pixel Science
478 subscribers
136 photos
53 videos
2 files
106 links
пишем о ресёрчах по Комьютерной Графике, нейронному Рендеру и ИИ

и про их влияния на индустрию конечно же, с инсайдами из личного ресёрча и карьеры

автор: @Mishok43, mishok43.com, PhD студент в IVD KIT, ex Eagle Dynamics
Download Telegram
Рендер-движки — всё? конечно нет, но:
Команда из Стэнфорда представила новый бенчмарк WorldScore, позволяющий оценивать модели генерации и рендера миров по таким критериям, как:
1️⃣ управляемость камерой
2️⃣ манипуляция объектами в сцене
3️⃣ темпоральная стабильность
4️⃣ консистетность проекции
.. и множество других

Как видно по результатам абсолютно все модели еще далеки от качественных результатов.

Имхо, штука поможет немного сбавить процент ненаучных тейков и более спокойно оценить траекторию прогресса в данном направлении!

P.s. идейно можно соединить с каким-то UE5 для доп. валидации на 100%-точно предсказываемых манипуляциях...

#графика #ии #статья
👍73🔥1
10к$, 15к$, 25к$ или целых 100к$ за победу в конкурсе от AMD по оптимизации всего 3 GPU Kernel-ов!

Ребята сделали что-то типа Kaggle и назвали "AMD Developer Challenge 2025"

Регистрация открывается: 8го апреля
Дедлайн сабмишена по первому ядру: 29го апреля

К сожалению не реклама, но пиарю т.к. считаю, что это:
1️⃣ прекрасная возможность занетворковать с крутыми ребятами - вас могут позвать на AMD Advancing AI Day 2025, CA
2️⃣ вы поможете снизить цены на видюхи Нвидиа и в общем ИИ
3️⃣ это блин охуенные деньги!

#индустрия #карьера #ии #гпу
🔥7👍1
Meta сожгла уже почти 50$ млрд на Reality Labs

Вышла интересная статья от Yahoo Finance, где ребята собрали инсайды из лабы

Кратко:
- ставка на то, что метавселенная выстрелит в ближайшее 10 лет, ставится всё больше под сомнения
- косты очень высокие, особенно из-за хардвеер сегмента и отсутствия опыта уровня Самсунга\Эппл

Сам отлично понимаю финансовую ставку, т.к. ничего не будет так контролировать внимание пользователей, как экран прям перед глазами

И понимаю нужду в собственном хардвеере в данной сфере

Но косты да, ебейшие. В блюскаее уже произвели оценки зарплатного фонда, но могу намекнуть на то что они сильно занижены

P.s. учтите что я biased в данном вопросе, т.к. моя следующая ресерч стажа будет как раз там

#индустрия #вр #графон
5🔥3👍2
Media is too big
VIEW IN TELEGRAM
🔥 Eurographics 2025 - Honorable Mention за нашу новую работу “Neural Two-Level Monte Carlo Real-Time Rendering🙌

Сайт проекта | Статья | Слайды | Видео (без сжатий)

Мотивация: сцены становятся сложнее, стоимость 1го light-path будет только расти... уже жопа, а будет еще хуже

Что придумали:
Real-time нейронный Incident Radiance Cache, который:
1️⃣ Учится в онлайне (трассируем ~3% пикселей)
2️⃣ Берёт латентное освещение из iNGP
3️⃣ Выдаёт radiance для любых направлений через fused MLP — дешёво, быстро

🔥 При 1080p RTX 4080 — всего ~0.5-1.5мс на одно направление!

📦 Оборачиваем в 2-Level Monte Carlo → unbiased + low-noise GI

Сильные стороны:
Перформанс +- не зависит от сцены
Хорош с нормалями\спекулярами
Масштабируется по TFLOPs, не памяти
Режет RTX-лучи в разы (в 10\100 - в теории)
Меньше видны артефакты

Но унаследовали минусы NRC:
– временной лаг
– локал. минимумы
– хренов в 🌿

На днях будет подробности про саму конфу, Лондон, инсайды про найм и по инвестициям

#графон #ии #научка
🤩14🔥8👏4👍3
Pixel Science
🔥 Eurographics 2025 - Honorable Mention за нашу новую работу “Neural Two-Level Monte Carlo Real-Time Rendering” 🙌 Сайт проекта | Статья | Слайды | Видео (без сжатий) Мотивация: сцены становятся сложнее, стоимость 1го light-path будет только расти... уже…
В продолжение историй из Лондона и EG 2025

Возможно это вайбы столицы, но на конфу приехали крутые ребята из АМД, Хуавей, Мета и т.д.

Очень много говорили про найм и будущее графики: "сколько же пикселей будут генерировать нейронки?"

На последний ? я вместе с будущим коллегой из Мета уже склонился к 💯 и мы попытаемся это доказать в ближайшее время - мне кстати одобрили J-1, могу хоть завтра в лететь США 🔥

Но по общению с многими, было видно насколько в 95% мест не работают над радикальными и рисковыми идеями. И это понимаемо, ребятам нужен продукт "завтра"... плюс все еще есть скептицизм к ИИ из-за его непрофессионального применения без учета контекста домейна

и эта же проблема в найме!
⬇️
Очень много заявок, но почти нет кадров, имеющие качественный домейн знания. Понимающие математику, графику, ГПУ и возможно совсем чуть-чуть ИИ. Людей или нет, или порой подходят лишь молодые выпускники приличных вузов

Я поразился, т.к. тоже самое слышал про найм и в 2021ом году

Поэтому совет: учите базу (гайд)
🔥10👍5
Pixel Science
В продолжение историй из Лондона и EG 2025 Возможно это вайбы столицы, но на конфу приехали крутые ребята из АМД, Хуавей, Мета и т.д. Очень много говорили про найм и будущее графики: "сколько же пикселей будут генерировать нейронки?" На последний ? я вместе…
Далее хочется подметить насколько научные конференции становятся неплохим местом и для бизнес-встреч

В особенности если ты презентуешь качественную работу и ловишь награду. "Papers open doors"

Я встретил фаундеров единорогов 🦄 и нескольких крутых европейских стартапов, а также тех кто только в самом начале пути. Обменялись контактами, один известный ИИ-ученый-фаундер даже дал мне четкую инструкцию для преобразование моего текущего ресерча в стартап. Со стороны всех легальных, патентных, венчурных и других аспектов. Даже уже словил офферы от нескольких ангелов и помощью с оформлением бизнеса 🤝

Поэтому, если вы также, как и я, хотели бы качественно занетворкать для бизнеса и карьеры -> научные конфы также делают свое дело в 2025ом году. Рекомендую!

P.s. В ЮК сейчас происходит неопределенные турбулетности с ограничением миграции, которые могут сказаться на айтишниках и ресерчах. если считаете, что вас это затрагивает, то возможно захотите поддержать данную инициативу

#индустрия #ии #графон #карьера
14👍4
This media is not supported in your browser
VIEW IN TELEGRAM
SpAItial AI - новый World\Spatial-AI Model стартап, но в этот раз от европейских ученых и местных венчуров! $13 млн seed-round (больше инфы)

Как я и писал ранее, научные конференции по типу Eurographics становятся неплохим местам и для формирования бизнес-контактов. Так как именно так можно было встретить того же Matthias Niessner - фаундера SpAItial AI - и задать ему парочку вопросов -> публикуйтесь и приезжайте на конфы

Также очень рад видеть публичное подтверждение слов множества фаундеров, что теперь и в Европе можно найти деньги на бизнес. Лиды: Earlybird Venture Capital и Speedinvest

Ребята нанимают, поэтому возможно захотите зааплаиться. Команда очень сильная!

#индустрия #ии #графон
🔥6
This media is not supported in your browser
VIEW IN TELEGRAM
Odyssey наконец-таки выпустили первую демку со своей interactive neural world-model. И в неё можно поиграть! Сам стартап разбирали ранее

В отличие от конкуретных демок (их также разбирали: Minecraft, Quake) их моделька имеет некий обновляемый латентный world-state, позволяющий не забывать чтоже было за камерой всего минуту назад - пример. Подробности тут

В остальном... 20 FPS, некое 240p разрешение и высокий лаг - это всё то, что можно было бы сейчас раскритиковать, но я лично не воспринимаю эти ограничения как нечто фундаментально-неразрешимое (есть проблемы и поглубже, о которых возможно напишу через полгода-год). Заявляют косты уровня 1-2$/юзер-час + они арендовали 360 H200 -> 1 видюха справляется с 1-2 юзерами

поэтому очень советую отнестись к современным ворд-моделям, как к первым играм конца 20го века, словить соотвествующие вайбы и запомнить их на будущее :)

#индустрия #ии #графон
🔥113👍2
Pixel Science
🔥 Eurographics 2025 - Honorable Mention за нашу новую работу “Neural Two-Level Monte Carlo Real-Time Rendering” 🙌 Сайт проекта | Статья | Слайды | Видео (без сжатий) Мотивация: сцены становятся сложнее, стоимость 1го light-path будет только расти... уже…
Пригласили на SIGGRAPH 2025 ещё раз презентовать нашу статью по нейронному рендеру!

Если вы также будете на конфе или просто в Ванкувере с 9го по 14ое августа - пишите в ДМ, попытаемся свидеться! Я уже визу получил, аж за неделю до самого ивента 😎

Если так не получится пересечься, но вы живёте вблизи к Редмонду/Сиэтлу - также не стесняйтесь отписать. Я до конца года здесь работаю на Мету в Реалити Лаб... чуть позже возможно напишу обзор на - как выяснилось - столицу компьютерной графики США
🔥22🍾4👍1
Про SIGGRAPH, рынок, разговоры о будущем графики

Съездил. Встретился с 10ками прекраснейших персон: начиная от крутейших аспирантов, продолжая ученами\инженерами\тех дирами всяких нвидий, амд и академии. заканчивая фаундерами известных стартапов, ранее фигируриющих в нашем канальчике. И теми, кого принято называть: "<прорывная технология> guy"

И честно говоря... грустно. забавно конечно, но грустно 😞

Несмотря на безумно глубокий опыт каждого из тусовочки, люди базово находятся в смятении на тему будущего. Спекулируют о том, куда может пойти графика в следующие года. И из-за этого происходит забавная уравниловка, что человек построивший сферу может на равном уровне обсуждать её будущее с начинающим специалистом. Т.к. the bitter lesson -> less inductive biases -> "понимание 3Д" все менее релевантно для 3Д

продолжение 🔽
(ч.1 ч.2 ч.3)
🔥933👍1
Pixel Science
Про SIGGRAPH, рынок, разговоры о будущем графики Съездил. Встретился с 10ками прекраснейших персон: начиная от крутейших аспирантов, продолжая ученами\инженерами\тех дирами всяких нвидий, амд и академии. заканчивая фаундерами известных стартапов, ранее фигируриющих…
Продолжение про SIGGRAPH ч.1

Кто-то просто делает ставки. На 10ки $млн. Надеясь открыть новые рынки, при всем при том что полноценный нейронный рендер пока и не заработал. Но рынки надо занимать заранее

А про найм говорить не приходится... Даже топ талантам уже очень сложно найти работу на чистом графоне. Сложно объяснить СЕО зачем нам еще +1 в оргу, приносящую стабильный доход. Да, именно что стабильный. Без всяких 10х и opportunity window
😭6
Pixel Science
Про SIGGRAPH, рынок, разговоры о будущем графики Съездил. Встретился с 10ками прекраснейших персон: начиная от крутейших аспирантов, продолжая ученами\инженерами\тех дирами всяких нвидий, амд и академии. заканчивая фаундерами известных стартапов, ранее фигируриющих…
Продолжение про SIGGRAPH ч.2

И я сам очень многому удивился и обнаружил свой предсказатель неоткалиброванным.

Хотя вроде занимаюсь нейронным рендером, шарю, вот нашу работу включили в "How Do Neural Shaders Help?" от Nvidia...

К примеру: знаменитая работа RenderFormer. Обсудил с авторами все мельчайшие подробности. Изначально рисовал себе такую картинку:

хорошо, каждый аттеншен-блок трансформерами какбы распространяет редианс от одного треугольника-токена к другому. просто некий radiosity, но в латентном пространстве

Типа чем больше блоков, чем глубже трансформер - тем больше отражений\преломлений модель может симулировать - оказалось нет, нихера. и авторы тоже поразались этому 🤯

модель находит важные пути-света значительно эффективнее, чем мы это делаем классическими алгоритмами. нам не нужны 12 блоков трансформера для симуляции 12 отражений луча света. хватит, условно говоря, 4

и да, понятно что пока медленнее. понятно что хреново скалируется. контекстное окно, все дела

но это всё WIP
👍52🔥1
Pixel Science
Продолжение про SIGGRAPH ч.2 И я сам очень многому удивился и обнаружил свой предсказатель неоткалиброванным. Хотя вроде занимаюсь нейронным рендером, шарю, вот нашу работу включили в "How Do Neural Shaders Help?" от Nvidia... К примеру: знаменитая работа…
Подытожу этот сумбурный тред фразой одного умного парня из мира Computer Vision:

"Не беспокойся. Мы это уже пережили 5-10 лет назад. И вы переживете. Также как это пережили все специалисты в сфере NLP после прихода sequence->sequence. Но да, народ отвалится. Бывает" 🙂

контекст про то как переживали данный кризис представили мира CV
4👍2🔥1
The Bitter Lesson for RL:
Verification as the key to Reasoning LLMs - отличная презентация, тутс

просто захотел поделиться. моя ставка, что РЛ произведет очень сильный импакт на графику. поэтому, рекомендую
6