Господа!

У меня хорошие новости! Вы знаете, я люблю, когда наши ребята что-нибудь ломают занимают первые места!

В общем в Сириусе в рамках проектной смены по доверенному ИИ проводили хакатон, который был нацелен на взлом DeepLab V3 - уже не нового, но сильного метода семантической сегментации картинок от Google.

В общем - стояла задачка - внесением небольших и не слишком заметных изменений в картинку заставить сегментацию работать неправильно.

Короче!

* Хакатон проходил 7 часов.
* Участвовало 13 команд
* Команда нашей молодежи зажгла и выбила первое место!!!
* Причем у них оказался едва ли не самый младший среди участников возраст! 😲👏

В общем - встречайте: Игорь Мелешин, Егор Ковалев, Готин Георгий - ВМК МГУ, 3 курс, 1 место! (на фото).
🎉🏆🎉🏆🎉🏆🎉🏆🎉🏆🎉🏆🎉🏆🎉

Они реализовали (не скачали, а реализовали!) PGD (Projected Gradient Descent ) атаку, которая лучше всех сломала DeepLabV3. Прикольно, что Strong_Baseline организаторов был также на основе PGD, но реализация менее удачная (название команды strongman, и да, лидерборды надо сортировать, согласен)))

А еще ребята выбили не только первое место по метрике, но самый прикольный пример атаки. Вы такие говорите модельке - выдели самолет. Она выделяет. А на атакованном изображении выделяет ВСЕ КРОМЕ САМОЛЕТА) Прямо хорошо так) Самолет искать там! 😉

Напомню, в хакатоне прошлого года по модному тогда LLM промптингу там же первое место тоже выбила команда из нашей лаборатории (тогда зажгли девочки)! Продолжаем отжигать! 🙂

И у нас явно удачный набор новых студентов был в этом году, если они так выбивают! ) Еще раз горячо поздравляю победителей!!! 💪💪💪

🥇🎉🥇🎉🥇🎉🥇🎉🥇🎉🥇🎉🥇🎉🥇🎉🥇

Господа!

Я опять с хорошими новостями)

В конце прошлой недели прошла защита проектов проектной смены по доверенному ИИ, про которую я много писал (пруфы: 1, 2, 3, 4, 5, 6, 7 😉). Всего было представлено на защиту 17 проектов, которые оценивались жюри по критериям:
* Понятность постановки и полученного результата (я ничего не понял ... я проникся)
* Практическая полезность и применимость (бесполезно ... крайне полезно)
* Общее качество работы (не сделано ничего ... идеальный результат)

В итоге (барабанная дробь 🥁🥁🥁🥁🥁🥁🥁🥁) первое место (8,81 баллов) занял наш проект "Атака на watermarking генеративных моделей для изображений (в рамках челленджа NeurIPS'24)" про который я писал в августе! Проектом руководили Анастасия Анциферова и Михаил Паутов, в команде из 6 человек участвовали наши Георгий Готин и Егор Ковалев (3 курс!). Дополнительную крутизну проекту придало участие в "Erasing the Invisible: A Stress-Test Challenge for Image Watermarks". До конца челленджа еще 2 недели, но предварительные результаты были:
* 2 место в номинации Demo
* 4 место (из 32!) в номинации Beige box
* 1 место (из 29!) в номинации Black box
Общий призовой фонд челленджа - 6000$, но, конечно, намного интереснее остаться в тройке лидеров "Стирателей невидимого" 😉 Это будет непросто, ибо обычно самые сильные команды свои решения под занавес выкатывают. Но в любом случае уже очень-очень круто!!! 💪💪💪🎉🎉🎉🥇🥇🥇

Второе место на защитах проектов занял (барабанная дробь 🥁🥁🥁) наш проект "Физическая атака на настоящую камеру идентификации лиц" (8,66 баллов), которым руководила (внезапно!) Анастасия Анциферова, а участвовали в составе команды из 4 человек Виктория Леоненкова и Екатерина Шумицкая. Они же взяли приз за лучшую практическую значимость. В двух словах - камера не устояла. При этом были показаны атаки на камеру и сервис распознавания лиц Face++. В том числе был пример, когда на исходное лицо доступа нет, а на измененное - доступ разрешается (другой вид атаки). В целом:
* Был перенесен состязательный результат с низкого разрешения изображения на высокое
* Реализована состязательная атака с маской в реальности
* Реализована натуралистичная атака с помощью генеративной модели
* Придуман метод атаки состязательным кокошником и протестирован на начальных стадиях
Про последнее расскажу ближе к Новому Году. 😉 У нашей состязательной Снегурочки может получиться очень обаятельный роман с камерами безопасности! Вам понравится! 😂 👍👍👍🏆🏆🏆

Третье место (8,04 баллов) занял проект под руководством Александра Гасникова (ректор Иннополиса, на секундочку) и Александра Лобанова, в котором единственным исполнителем был Георгий Бычков - наш студент магистратуры. Проект назывался: "Сходимость безградиентных алгоритмов в условиях перепараметризации для архитектуры федеративного обучения". В одно лицо затащить до 3 места - очень круто (хотя кураторы тоже сильны, вопросов нет). Кстати — о другом первом месте Георгия я тут уже писал. 🙂🙂🙂

И, наконец, 6 место выбил проект "Защита моделей классификации видео" (7,5 баллов) под руководством нашего аспиранта Александра Гущина который в одно лицо затащил наш бакалавр Александр Костычев. Защиты — это активно развиваемая тема, которая будет тем более актуальна, чем чаше атаки будут встречаться в нашей суровой действительности. Делать их непросто. Ребята молодцы. 👏👏👏

В общем - отстрелялись в том или ином виде 4 места из ТОП-6 (из 17 команд). 🏆 Очень неплохо съездили и прокачались! 😁😁😁

Господа!

У меня на прошлой неделе закончен "Осенний марафон" 🚀🤕🚀:

* 5 поездок: 3 в Питер, одна — в Сочи, одна — в Тарусу

* 6 недель

* 10 конференций (на двух не выдавали беджи, причем одна из них называлась симпозиум...😉🤷‍♂️)

* 11 докладов (5 на английском)

Уффффф..... ) Можно немного выдохнуть 😅

Как легко заметить по беджам — много мероприятий было корпоративных. Что происходит сейчас в индустрии? Как изменились за год задачи? Какие есть интересные решения?

Например, мы уже давно толкаем тему Video Super-Resolution (что очень хорошо видно тут, тут и тут). В этом плане очень приятно было видеть презентацию крупного начальника известной китайской компании, посвященную в целом актуальным задачам обработки видео, у которого чуть не на каждом втором слайде поминался SR) Нам, поддерживающим videoprocessing.ai это было прям бальзам на душу ✌️

Кстати, в нашем проекте артефактов SR нашли артефакты в NVIDIA DSR (который уже сегодня во всех latest Chrome, Edge, and Firefox browsers, я уж молчу про игры). Также интереснейшие разговоры про ужас от артефактов SR в новых умных телевизорах были на VideoTech. Будем развивать тему)

Ну и метрики с атаками и защитами никуда не делись 😁

Процесс идет! Stay tuned!)

#pro_conferences

Коллеги!

Наш аспирант Николай Сафонов продолжил хорошую традицию посещения конференций VCIP и передает всем привет из Японии с VСIP-2024! 🙂 Эта конференция — старейшая по обработке видео и нам, как хозяевам домена videoprocessing.ai, безусловно, положено там быть 😉

Из путевых заметок:

Товарищи из SJTU (Шанхайский университет) сделали датасет по стримингу, в частности для Youtube моделировали проблемы с сетью. Я пообщался с чуваком, взял вичат, он очень хотел мне сразу отдать датасет на скачивание. А ещё его команда в Настином челендже ECCV заняла второе место. А вчера ему писал Миша Дремин)

Николай пишет про наш Compressed Video Quality Assessment Challenge 2024, причем Михаил Дремин — другой наш аспирант писал им совершенно независимо и по-другому вопросу. Как говорится: "Не мир тесен, прослойка тонка!" 😉🌎🌏

И вот из второй лабы познакомился с профессором Ченг, это та самая, от которой один из самых известных нейросетевых кодеков Cheng2020. У нее довольно интересный постер по облегчение декодера нейросетевых кодеков. Поговорил. Когда сказал что из МГУ, она сказала "О это там где много крутых бенчмарков, я очень часто на ваш сайт ссылаюсь". Вообще кажется ваша идея стрельнула, нас узнают по бенчмаркам теперь молодые постдоки.

Кто лекцию про JPEG AI слушал или мой рассказ про нейросетевые артефакты JPEG AI, видели ссылки на Cheng2020 😁, так что мы на нее тоже активно ссылаемся) Ну и радует, что наш сайт знают, конечно.

Также на конференции был фуршет, на котором Николай жестоко ломал шаблоны:

Ну а мой вчерашний китайский друг удивлялся непьющему русскому) (мы им так все стереотипы обломаем)

Очень правильный вариант облома стереотипов, считаю. Руссо сайентисто, облико морале! 😂🤣😂

Ну и не работой единой, также Николай успел съездить к Фудзияме (пруф приложен!)

Как пелось в одной песне:
Фудзияма — не яма — гора
Над священной и быстрой рекой.
А Ямамото — такой генерал,
Харакири — обычай такой.

Кстати, рассказывал Николай о своей работе по измерению артефактов бандинга на экранах с разным контрастом. В эпоху массового распространения HDR экранов очень актуальная тема! 📈

Продолжаем движение! 😁👋

#pro_conferences

Господа!

На этой неделе (помимо AIJ) прошла Открытая конференция ИСП РАН, посвященная 30-летию ИСП (и 300-летию РАН).

Вообще, ИСП — один из самых молодых институтов, причем активно растущий и с достаточно молодым директором, который очень плотно вкладывается в его развитие (что, вежливо говоря, бывает сильно не всегда, а скорее исключение). Ну и 30 лет назад создавать институты было не очень принято. Тогда в основном их закрывали. Для полноты картины — у ИСП много проектов с компаниями и они официально зарегистрированы в реестре минцифры как IT компания (респект такое пробить! 💪), как следствие — льготные налоги (что очень важно в плане возможностей поднять зарплаты!), ну и они 2 года назад активно использовали бронь минцифры во время мобилизации (представляя заметный контраст с некоторыми другими институтами и университетами, тут я деликатно без примеров с вашего позволения, но они красавцы). 👏

Короче! Юбилейная конференция прошла с великолепным размахом, заметно большим, чем в прошлые разы. Промежуточно было 1700 участников. На итог, видимо, будет больше. 😲

Но гораздо важнее изменение вайба, я бы сказал. Вот реально чувствуется бурление. Все делают проекты. Всем не хватает людей. Наш сотрудник Иван Молодецких пришел доклад читать, у него сразу интервью взяли. 😂 И такая активность радует! 👍

Мы там 5 докладов прочитали) 💪

Вообще у меня лично получается где-то 17 докладов за осенний семестр, т.е. больше 1 доклада в неделю. И это рекорд за последние несколько лет. Причем я еще не ездил на когда-то традиционный ГрафиКон 😢 и отказывался от приглашений (ибо уже перебор). 🥵

В общем — будем качество докладов поднимать, количество увеличивать, а...

А ИСП РАН ГОРЯЧО ПОЗДРАВЛЯЕМ С ЮБИЛЕЕМ!
🎉🔥🎂🎉🎂🔥🎉

У института великолепные достижения, в том числе в последние годы с Центром Доверенного ИИ (в котором мы принимаем активное участие). Например, в этом году у ИСП 21 А* статья по ИИ ✌️✌️✌️, что для академического института РАН (неизбалованного государственным финансированием) прямо скажем очень круто.

В общем — новых свершений и не сбавлять темпа!
🚀🎉🙂🎉🙂🎉🙂🎉🚀

#pro_conferences