VideoLab & Self-Motivated Learning
1.29K subscribers
381 photos
31 videos
322 links
Канал лабораторий машграфики ВМК МГУ, анализа видео института ИИ МГУ и анализа видео университета Иннополис.

О том, как меняется DL-мир и как заставить себя прокачиваться, чтобы успевать за ним.

А лучше не просто успевать, а быть в числе лучших)
Download Telegram
Господа!

На Хабре сейчас висит на 4 месте в топе недели (и на 1 месте в "читают сейчас") текст Молодежь нынче пошла не та, или поиск системного аналитика «за 200» от человека, который много технических собеседований проводит.

Там, в частности, есть такой кусок (выделено мной):

На вопросы о том, что было пару лет назад, кандидаты часто отвечают «это было давно, не помню уже». Так отвечали про свой прошлый проект – в чем была его суть и ценность, про нотацию диаграмм которую использовали на прошлом месте работы, или про структуру спецификации требований.

Если же кандидат что-то изучал только в вузе, но не применял на практике, то как правило ничего кроме названия в голове не осталось. Хотя там, скорее всего, была какая-то практика.

Почему меня это расстраивает? Это обесценивает опыт. Полученный опыт переходит в устойчивые умения и навыки, повышающие ценность сотрудника, только после фазы осознания и рефлексии. Ответ «не помню» позволяет предположить, что полученный опыт был выкинут из головы сразу же после завершения работы, и никак не закрепился. При таком подходе полезность и ценность сотрудника растёт медленно (если вообще растёт).

Человек по сути пишет о массовом непонимании людьми ключевых принципов, от которых зависит время полураспада знаний, что приводит снижению роста ценности сотрудника со временем (в лучшем случае).

Вообще всю статью рекомендую. Для вас это шанс отличаться от большинства.
👍7
Ну и заодно, чтобы два раза не вставать.

На том же хабре два месяца назад на первое место в топе недели и хорошее место в топе месяца ушла очередная исповедь программиста, у которого начало конкретно пригорать в 30 с хвостиком. И это опять веб-программист))) (почему я не удивлен ни этому факту, ни тому, что статья залайкана (+247)? 😉

Ну и жизненные шаги просто классические, и начало, и продолжение (выделено мной):

"Зато сайты, сделанные на коленке, начали приносить огромный доход на арбитраже трафика. А когда у тебя по карманам и полкам рассованы пачки денег, а тебе всего 19 лет - самомнение летит вверх с головокружительной скоростью."

"Так прошли 2,5 года. Вспоминая себя - я понимаю, что я мог бы до сих пор там работать, и считать себя хорошим разработчиком. Ну а как понять что ты плохой? Работу выполняю быстро, вроде бы качественно, в срок, точнее обычно - раньше срока. Кругом хвалят, премии дают."

"К тому времени универ был благополучно заброшен, из-за вовремя не сданных лаб я получил недопуск к сессии и был благополучно отчислен."

"Но шли месяцы, я разбирался в коде все больше и больше, стал экспертом и мое эго снова вернулось на место. Как же, я могу сделать любую задачу, опять работаю быстро, начальство сыпет похвалами и премиями. Мне всего 23, куплена новенькая машина с салона, жизнь играет красками."

"Еще один эпизод с собесами, оффером, и перебитием оффера от текущего работодателя. Зп растет не по дням а по часам! Да я просто, мать его, гений!"

"Затем был переезд в Штаты, и тут со всех сторон на меня полились ушаты холодной воды, отрезвляя и заставляя включать думалку."

"В итоге я получил пинок практически ото всех крупных компаний и стартапов. И осознал - я, разработчик с практически 12 летним опытом за плечами - простой формошлеп. Да, еще есть время наверстать упущенное, но тогда, в 20, в самом начале, это сделать было проще и эффективнее.
"

"Универ. Я все еще считаю, что это не панацея, и во всем можно разобраться самому, но ведь гораздо проще внимать знания от кого-то... Знаете, что меня поразило? Большинство, если не все, алгоритмы, которые сейчас используются для решения сложных задач - были сформулированы и выведены в шестидесятые, семидесятые года прошлого века!! Вы знали? Я не знал. Потому что забросил универ."

"Когда тебе 20 - все же гораздо проще работать «за еду» в проекте, где ты можешь научиться гораздо большему, чем формошлепить задорого только потому, что никто кроме тебя не знает этой CMS. В 30, когда у тебя семья, дети, гораздо сложнее выбирать между этими двумя параметрами."

Полная версия тут и называется Исповедь ничтожества

Замечу, что то, как его накрыло в 30, это полная фигня по сравнению с тем, как накрывает программистов в 40))) И его накроет с большой вероятностью, поскольку я у него вижу очень неплохую рефлексию по поводу отрезка 20-30 и совершенно не вижу конструктива, чем ему срочно надо заниматься, чтобы не пойти в тестировщики в 40. И то, что он в США уехал - будет для него в минус, поскольку любые переезды между странами - это недетские расходы, а у него на горизонте (cюрприз-cюрприз!) сокращение доходов. А начиналось все с того, что он не знал, куда деньги девать))) Ну знал, конечно, рестораны, машины, стартапы, жена, дети, переезд в США... )))

Впрочем главное, чему учит история - что она ничему не учит) (за редким исключением, процент которого, надеюсь, будет чуть выше среди вас)
Please open Telegram to view this post
VIEW IN TELEGRAM
👍7
Господа!

Рад сообщить, что у нас после большого перерыва очередная статья на Хабре - о том, как с приходом нейросетей все стало намного сложнее и запутаннее с метриками качества видео. Как "старые добрые" массово списываются в утиль, а новые прекрасные нейросетевые взламываются и позволяют манипулировать их результатами почти в произвольных пределах. Одно из прямых следствий этого - скоро в статьях и материалах компаний метрики качества видео не будут означать просто НИЧЕГО! (кроме шуток - это совершенно не смешно!) С новыми метриками сделать чтобы метод А был больше метода Б (или наоборот) - не вопрос, простор для читинга огромный. Вот только как теперь, дорогие друзья, с этим жить?

Ну и мы по этой теме активно оттоптались и с публикациями, и с исследованиями, и с новыми проектами.

Велкам читать:
https://habr.com/ru/post/700726/

На заглавной картинке - 99% людей (все, кроме 1% отщепенцев) считают, что слева картинка лучше. А PSNR говорит, что лучше справа. Причем кардинально лучше. Кому верить? Может новым нейросетевым метрикам? 😉

Репост приветствуется!

#Habr
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥8👍2
Господа!

У меня вышла статья, про которую я говорил ходившим на курс - про деградацию мозгов, цифровые наркотики и их влияние на способность усваивать новое ))):
https://habr.com/ru/post/704798/

С многочисленными примерами из наших лекций, лекций коллеги и т.д.

Самое главное - сделать правильные выводы (и остаться среди самых востребованных).

Широкое распространение приветствуется!
👍3🤔3🔥2👎1
Господа!

Последняя статья набрала 100+ тысяч просмотров за 6 дней и вышла на 1 место в топе месяца на хабре ) (и в целом она на 1 месте по закладкам и на 2 по просмотрам и "хабролайкам" среди всех моих статей с 2015 года)

В общем - более попсовая тема (хотя и важная для каждого) зашла на порядок лучше, чем сложная прошлая статья про метрики с популяризацией наших статей на NeurIPS & BMVC и нетривиальных моментов развития ИИ. Ожидаемо, конечно, но как есть...

Работаем дальше!)

#Habr
🔥8👎1👏1
Из текущего интересного - я вошел в состав жюри конкурса Технотекст - на лучший текст Хабра в номинации "ML и AI". Ранее я дважды участвовал в конкурсе и оба раза брал 1 места в номинациях "ML и AI" (за 2020) и "Образование в IT" (за 2021). К сожалению в этом году как члену жюри участвовать нельзя, поэтому свои статьи по взлому метрик и обучению переполненного мозга (которая аж на 17 месте в топе года хабра сейчас из примерно 30000 статей!) подать на конкурс этого года не смогу. Так что дальше придется просто так писать! ☺️😎
Зато расскажу про лучшие статьи прошлого года как-нибудь! )

#Habr
Please open Telegram to view this post
VIEW IN TELEGRAM
👌4
Господа!

Возможно, это неправильно, но ваш покорный слуга не послушался совета старшего товарища (кто дочитал до конца последнюю статью на хабре 😉) и мы таки делаем зимний набор! )

Для хорошо сделавших задания и прошедших вчерашнее собеседования коллеги подготовили аж 7 тем на выбор, причем несколько неожиданно для меня - в шаблоне института ИИ))) (они его сотрудники, им можно))). Анализ взлома метрик, анализ (интеллектуальный!) взламываемости контента, бенчмарк нейросетевых артефактов и прочие AI-радости 🫶 😎

Кто не прошел - не отчаивайтесь и приходите в феврале на вторую часть марлезонского балета спецкурса! Прикольных тем у нас хватит на всех (главное, чтобы были силы их затащить). 👌

Да пребудет с вами сила! 💪💪🧑‍💻
Please open Telegram to view this post
VIEW IN TELEGRAM
👍4❤1😢1
Ну и для большей уверенности в ваших силах - достижения пары предыдущих поколений поколений (в основном за последний год).

7 наших бенчмарков вышли на 1 места в 5 категориях на papers with code! (в двух соревнуемся сами с собой за 1 место))) - сортировка идет по количеству методов с открытым исходным тестом в бенчмарке.
🔥5👍1
Заметим, что наши бенчмарки построены на ЗАКРЫТЫХ датасетах. Возможно именно поэтому на них не воспроизводятся некоторые топовые результаты других бенчмарков 😉

Вообще, открытые датасеты сильно упрощают поддержание бенчмарка. Ибо в худшем случае авторы метода сами на нем гоняют алгоритм и присылают автору бенчмарка только результат. Увы, как следствие - очень многие результаты не воспроизводятся (суровая реальность). Мы поддерживаем закрытые датасеты, что позволяет смотреть, кто и как на самом деле работает (очень ценно для понимания, что творится в области). Кстати, именно за код paperswithcode очень любят компании и топовые ресечеры.

Как-то так! )
Please open Telegram to view this post
VIEW IN TELEGRAM
🤔4
Господа!

Тут BMVC (British Machine Vision Conference) выложили статью Кати Шумицкой https://bmvc2022.mpi-inf.mpg.de/790/ - можно зайти голос Кати послушать)))

Самое интересное, что Катя на 4 курсе (т.е. результат за 3 курс получен). И так быстро затащить BMVC очень непросто.

Навскидку вспоминается только студент видеогруппы Карен Симонян, который затащил ICIP в компании на 4 курсе и BMVC на своих результатах через год. Это он позднее VGG-16 придумал и сейчас из Google DeepMind ушел в Inflection.AI)

В общем у Кати хорошо пошло, есть в кого! 👍🏆👍
👍22🎉4
Господа! У меня кучно пошло с новостями, но как есть)

Я уже 10+ лет рассказываю на лекциях разные истории из жизни с описанием проблем, которые возникают у большинства (с забыванием изученного, с вылетанием из профессии, с прокрастинацией и т.д.). Глубокая идея тут в том, что если делать как многие, то и результат (внезапно!) оказывается как у многих (я вежливо смягчаю формулировки 😉))).

И не попасть на путь лемминга очень сложно, даже хорошо зная о нем. Я вот кучу лет про это рассказываю, но какое-то время назад поимел крупные проблемы с позвоночником. Стал копать глубже и нашел книжки, где популярно объясняется, почему у 80% людей после определенного возраста проблемы со спиной и почему при сидячей работе и удобном кресле вероятность проблем (внезапно!) резко возрастает. Вот только я (как и 99% других) прочитал эту книгу когда проблемы стали серьезными. В общем широка тропа лемминга. И хорошо натоптана! ) И кресло было таким удобным! 😖

Причем постепенно все популярнее тема "хорошо сейчас, плохо потом" (взамен устаревшей "сложно сейчас, хорошо потом"), поэтому ширина той тропы плавно растет)))

Короче! Желаю всем в новом году минимизировать вероятность не только текущих, но и будущих проблем!

Сделали не идеально (можно лучше), но пусть так, чем никак (большинство исходников лежали несколько лет))).

Приятного просмотра на новогодних 👋👋👋)))!
https://www.youtube.com/playlist?list=PLjnbr2ZalOERJFXH8CjggCtJc0Uz7wZb0
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥15❤2😢2👍1
Коллеги!

Я периодически топлю за то, что производные ChatGPT существенно поменяют мир в ближайшие 3-5 лет. В последней статье на хабре (которая, кстати, №1 по хабралайкам среди всех моих статей за 7 лет, добралась до 150 тысяч просмотров, 14 места в топе года и до по сути до 2 места по полезноте - в статье 4 место, но за это время она умудрилась обогнать "Краткий справочник по «всем-всем» командам Linux" и "Как я несколько лет боролся с прокрастинацией и победил: полное практическое руководство" 😨😉😎... Как получилось обогнать победу прокрастинации я до сих пор не понимаю, очевидно я недооцениваю актуальность проблемы мозгового ожирения). Но там я про ChatGPT буквально одним предложением.

А тема на глазах развивается! Есть, например, стартап, который пилит поисковую систему нового поколения. И я его как хакнуть VMAF спросил:
https://labs.kagi.com/ai/contextai?question=how+to+hack+VMAF

В ответах чисто в стиле ChatGPT и с использование веба очень наглядно видно, насколько веб улучшает качество ответа на таком запросе:
———————————————————————————
Web + AI

Hacking VMAF is possible by artificially increasing the metric through video preprocessing techniques. This can be done by applying different color corrections to compressed videos, which increase the values of full-reference metric VMAF and its tuning-resistant version, VMAF NEG [1][2][3][4]. A pipeline for tuning parameters of processing algorithms has been proposed that allows to increase VMAF by up to 218.8% [5]. It should be noted that while it is possible to hack VMAF, this should be taken with a grain of salt when comparing pre-processing approaches [6]. Additionally, other methods such as video distortion have also been proposed for increasing VMAF quality values [7].
[1]: Hacking VMAF and VMAF NEG: vulnerability to different ... (
https://arxiv.org/abs/2107.04510)
[2]: Potential VMAF Hack · Issue #489 · Netflix/vmaf · GitHub (
https://github.com/Netflix/vmaf/issues/489)
[3]: Hacking VMAF and VMAF NEG: vulnerability to different ... (
https://arxiv.org/pdf/2107.04510)
[4]: Hacking VMAF with Video Color and Contrast Distortion (
https://ceur-ws.org/Vol-2485/paper12.pdf)
[5]: [PDF] Hacking VMAF and VMAF NEG: Vulnerability to Different ... (
https://www.semanticscholar.org/paper/71c676b4ec1465ed6a52684c1cf5ffea7a717c45)
[6]: Review: iSize BitSave Video Preprocessing (
https://www.streamingmedia.com/Articles/Editorial/Featured-Articles/Review-iSize-BitSave-Video-Preprocessing-139985.aspx?utm_source=related_articles&utm_medium=gutenberg&utm_campaign=editors_selection)
[7]: Video Distortion Method for VMAF Quality Values Increasing | DeepAI (
https://deepai.org/publication/video-distortion-method-for-vmaf-quality-values-increasing)

AI

VMAF (Video Multi-Method Assessment Fusion) is a video quality metric developed by Netflix. It combines multiple algorithms to measure the perceptual quality of a video, and can be used to compare different encodings or codecs. Unfortunately, VMAF cannot be hacked as it is an algorithm that measures the quality of videos based on various factors such as resolution, bitrate, frame rate etc.


#Habr
Please open Telegram to view this post
VIEW IN TELEGRAM
Господа!

Из забавного. В прошлом году нас больше 4 месяцев плотной работы заняла запись онлайн курса по сжатию в Вышке.

Ключевые отличия:
* Собрали темы по сжатию, в т.ч. которые на ВМК я перестал читать (например, сжатие звука)
* Под это дело обновили часть слайдов
* Сделали задания небольшими и добавили тесты

Сейчас глобальное развитие идет в сторону онлайн курсов, но у них помимо пачки плюсов есть пачка минусов + нужно по-другому делать слайды, нужно по-другому давать материал (блоки максимум 15 минут), нужно по-другому проверять задания. Но это в любом случае новый уровень и охват гораздо большей аудитории.

Материала записали довольно много. Вместе с допами получилось больше 20 часов видео в 10 лекциях (т.е. для желающих идти глубже материала больше, чем в среднем семестровом курсе).

Также по настоятельной просьбе продюсера курса я организовал 4 интервью с двумя экспертами по темам лекций. Это когда я прикидываюсь валенком задаю сознательно глупые вопросы о том, как это все применяется сегодня в реально жизни в компаниях. Причем с руководителем технической части Кинопоиска мы пошли еще дальше (в игре в Дудя))) и был даже блиц))))) В общем постарались реализовать то, что заметно сложнее реализовать в рамках обычного курса, а в онлайн - самое оно!

Кому интересно - вот промо курса.

Останавливаться на достигнутом не собираемся - будем двигаться дальше! 😉

О еще одном нашем курсе скоро напишу! 😎
Please open Telegram to view this post
VIEW IN TELEGRAM
👍14🔥1😢1
Всем привет!
Уже скоро начнется весенний спецкурс «Интеллектуальные методы обработки видео» — в следующую среду 15 февраля.

Формат проведения — очные лекции каждую среду в 14:35 в аудитории 609.

В ходе курса вы узнаете об актуальных задачах обработки видео.
А также:
* Получите базовые навыки работы с видеоконтентом.
* Научитесь работать с 4D кадрами
* Построите и обучите нейросеть для повышения разрешения.

Чат курса по прежнему доступен по ссылке:
🔥3😢2
Господа!

Только что ушла в релиз большая статья про Super-Resolution на Хабре!

В конце прошлого года три наших бенчмарка SR вышли на 3 первых места (из 16) на papers with code https://paperswithcode.com/task/video-super-resolution

+ у нас идут работы по сбору большого датасета артефактов Super-Resolution

+ мы дообучаем и улучшаем SR.

Обо всем это подробнее тут:
https://habr.com/ru/post/716706/

#Habr
🎉5🔥2
This media is not supported in your browser
VIEW IN TELEGRAM
Всем привет уже завтра начнется спецкурс «Интеллектуальные методы обработки видео»

Ждем всех желающих в 14:35 в аудитории 609

P.s. на гифке изображен четырехмерный кадр вычислительного видео одного из заданий курса
❤5
Коллеги!

На прошлой неделе Максим Синюков (4 курс) доложил свою статью (постер) на Data Compression Conference в штате Юта в США.

Из путевых заметок Максима:

Наши статьи по взлому метрик заинтересовали Bytedance, Netflix, Amazon, Alibaba (некоторые даже видели статью раньше). Из Amazon люди удивились, что некоторые метрики у них используются как основные (например, VMAF) и могут так сильно быть взломаны. Сказали, что им это очень важно. Пропиарил старую статью по взлому VMAF NEG

Из нетфликса было пару человек. Сильный взлом они не видели, тоже были сильно удивлены. Но все равно Андрей Норкин сказал, что для их внутренних целей компании она подходит, поэтому все хорошо с метрикой.

Какие выводы можно сделать:

1. "Сложно не значит невозможно". Да, поехать в США сейчас эпопея, но это совершенно реально!

2. Первую Scopus статью у Максима приняли в августе перед началом 2 курса (следствие его плотной работы по научной теме весной). Заметим, что не у всех бакалавров получается Scopus. При этом прикольно, что улучшение нейросетевых помогаек программистам идет такими темпами, что не может не сказаться на популярных специальностях уже с конца этого года. И кто-то будет к этому так или иначе готов, а кто-то нет.

3. Компании активно интересовались нашими исследованиями и мы, очевидно, недостаточно усилий прикладываем для рекламы наших достижений. Будем работать.

До сведения Нетфликса, что с метрикой не все хорошо, обязательно доведем, они недооценивают последствий сильного взлома ))) (а с Норкиным мы знакомы лично)
🔥14❤8
У нас много разных интересных новостей, руки не доходят писать.

Пару недель назад сделал доклад в треке AI на TrueTechDay от МТС. На удивление мероприятие было очень масштабным. Они называют 2 тысячи человек на месте (7 треков параллельно!) и еще 16 тысяч уникальных онлайн.

Наиболее интересным (помимо впечатлившего размаха мероприятия и, собственно, докладов) там было очень интересное общение с другими спикерами. На которое едва ли не большая часть времени там ушла))). В том числе были очень интересные дискуссии про будущее LLM.
👍7🤔2👎1
Ну и чтобы 2 раза не вставать на тему LLM)

Выше график роста успешности предложений GitHub Copilot за 3 и 4 кварталы прошлого года (график отсюда). Видно, что в 4 квартале рост ускорился.

Вопрос: что будет, если они добавят +20% за 4 квартала этого года? )))

Понятно, что это непросто, но с другой стороны если кто следит, как GPT штурмует CodeForces и LeetCode, там очень впечатляющий прогресс за последние 1,5 года. А в этом году вложения в тему выросли чуть не на два порядка (только OpenAI получила 10 миллиардов долларов инвестиций, что не может не сказаться на скорости их работы).

Из свежего - Amazon недавно предложила свой Amazon CodeWhisperer совершенно бесплатно:
https://aws.amazon.com/ru/codewhisperer/
Понятно, почему они так делают - им нужны данные для обучения и совершенствования. Но тенденция и конкуренция налицо!

Что это означает для вас... 🤔

Помню 4 года назад я спорил с дизайнером по поводу прогресса нейросетей (тогда только-только нейросети мазки кистей повторяли). Дизайнер мне не верил, что их профессия сильно пострадает. Сегодня это факт.

Два года назад я спорил с копирайтером, что нейросети их потеснят. Он мне говорил "Яндекс Балабол - это просто смешно!". Хорошо смеется тот, кто смеется без последствий... Сегодня их профессия почти накрылась.

Я с огромным удовольствием поспорю (желательно публично, чтобы материал для хабра был))), что в ближайшие 3-4 года структура спроса (сформулируем деликатно) на программистские специальности кардинальным образом изменится! Запомните этот твит! 😉

Это заведомо будет означать необходимость переобучения и дообучения (которые тем сложнее, чем больше возраст). Плюсом для вас будет то, что с дистанции сойдет много "возрастных" программистов, но я бы на вашем месте не радовался этому, а смотрел бы дальше 😉. Sapienti sat!
Please open Telegram to view this post
VIEW IN TELEGRAM
😁3🔥1
Кому интересно в режиме реального времени наблюдать, как китайцы захватывают мир 😉 (в области видеокодеков) - вот предельно свежий анонс (выложен только что) о релизе двух наших сравнений кодеков, сделанный специально к NAB Show. В двух словах - они движутся без лишней PR шумихи, но широким фронтом (несколькими компаниями) и довольно мощно.

https://www.linkedin.com/pulse/msu-video-codecs-comparison-hardware-cloud-released-dmitriy-vatolin/
Господа!

ТОЛЬКО ЗАВТРА! И ТОЛЬКО В ЛАБОРАТОРИИ!

Для проекта Huawei мы арендуем большой HDR монитор! Большая просьба подойти с 10:30 до 15:30 в 702 и посмотреть на нем мультики и покушать мятные пряники) (с чаем!!!))))

Вопросы (по координации) писать https://t.me/nickossaf

Ваше беспристрастное мнение о качестве контента внесет неоценимый вклад в улучшение видео ближайшего будущего! 😉
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5🤩2👍1