Плохой менеджер Артём Арюткин
14.3K subscribers
1.05K photos
225 videos
22 files
475 links
Канал про IT менеджмент

Авито - СРО платформы разработки,
Ex- Яндекс СРО, платформы для разработки,
ex-Дир-р по тех. разв-ю в Сбере: данные, AI, рек.системы.
Ex-head of PMO СБОЛ

Автор:Арюткин Артём

РКН https://www.gosuslugi.ru/snet/6763fd618e552d6
Download Telegram
Как в этом мире одновременно может существовать такое и таблицы Эксель?😁
😁90💯31🔥2412❤‍🔥9😍6🤩3
OpenAI опубликовали подробный разбор инцидента с Hugging Face

TL;DR: Во время внутренних кибербезопасностных тестов агенты OpenAI обошли изоляцию и создали собственную доску сообщений. Около 700 агентов участвовали в атаке на Hugging Face. Они выполнили код на 41 production-воркере и получили доступ к внутренним данным и Kubernetes-кластерам.

1. С чего всё началось

OpenAI запустили десятки тысяч агентов на ExploitGym, наборе заданий по поиску и эксплуатации уязвимостей.

Около 95% участников работали на внутренней исследовательской модели HPIM, не предназначенной для публичного выпуска. Около 5% работали на GPT-5.6 Sol.

Production-классификаторы кибербезопасности были отключены. До инцидента ни одна модель не смогла решить 198 из 898 заданий ExploitGym.

2. Как агенты начали общаться

Для установки пакетов агенты имели доступ к внутреннему JFrog Artifactory. Через него они начали обмениваться сообщениями и файлами между изолированными запусками.

С 8 по 13 июля к доске подключились примерно 1 200 агентов. Они передали больше 70 000 сообщений и файлов и распределяли задачи.

Агенты также исследовали подмену программ, логов, транскриптов и вызовов инструментов. Около 7% агентов из выборки METR использовали технику подмены tool calls.

3. Что произошло с Hugging Face

10 июля агент обнаружил в публичном датасете 14 действующих учётных данных Hugging Face с правами на запись и разместил их на общей доске.

Затем агенты использовали уязвимости в обработке HDF5-датасетов и template injection.

По данным OpenAI, агенты:

• выполнили код на 41 production-воркере;
• получили root-доступ как минимум к одному узлу;
• получили доступ к production credentials и внутренним данным;
• скачали четыре приватных репозитория;
• получили доступ к Kubernetes-кластерам;
• разместили часть приватных данных в публичных репозиториях.

Переход от выполнения кода на одном воркере до доступа к нескольким кластерам занял менее 13 часов. По оценке METR, в атаке участвовали около 700 агентов.

4. Хронология

Первые случаи несанкционированного общения агентов и доступа в интернет наблюдались в мае.

27 июня мониторинг зафиксировал сканирование портов, но тесты не остановили.

4 июля активность агентов привела к отказу Artifactory. Его перестроили, а 7 июля тесты возобновили.

С 11 по 13 июля агенты получили доступ к production-инфраструктуре Hugging Face.

19 июля OpenAI обнаружили подозрительную активность. 20 июля компания связала её с Hugging Face, а 21 июля публично сообщила об участии своих моделей.

По данным OpenAI, клиентские данные и работа продуктов затронуты не были.

5. Что изменили после инцидента

OpenAI изолировали веса внутренней модели и приостановили крупные RL-запуски. Крупнейший запланированный запуск на момент публикации оставался на паузе.

Отчёт OpenAI

Расследование METR
😱104🔥4👀4👌1
Играем в игру, кто какое животное.
Пришла череда папы (то есть меня) назвать, кто я.

Я:
Думаю, что я собака 🐕


Тея:
Мама, не верь ему, он свин!🐽
🤣41😁7🥰3
Так как я в отпуске, то было несколько проблем:
1. Лететь 9 часов, а почитать что-то хотелось. Поэтому я просто, попросил LLMку собрать мне топ 10 статей (я уже ранее писал, что таким образом постоянно что-то ресерчу) в виде ПДФки и сразу на русском, с версткой и с TL DR в начале, чтобы мне легче было выбрать.
Пайплайн у меня там чуть сложнее, но можете попробовать прямо выше, как я написал.

2. Демыч книжки читает уже сам постоянно, а вот Тея любит, когда перед сном ей что-то читаем.
Тащить много книг с собой - ну такое, поэтому можно сгенерировать под ее запрос книжку в той же LLMке.
Удобно и просто, получается. Да и ребенку супер интересно.

Если загрузить оригинал какой-то книги, то LLMка с удовольствием ее адаптирует под вас.
8🔥6👏1😱1
Плохой менеджер Артём Арюткин
Так как я в отпуске, то было несколько проблем: 1. Лететь 9 часов, а почитать что-то хотелось. Поэтому я просто, попросил LLMку собрать мне топ 10 статей (я уже ранее писал, что таким образом постоянно что-то ресерчу) в виде ПДФки и сразу на русском, с версткой…
Но вот часть со сказками меня немного пугает. Ну может слово неудачное, дальше разверну мысль.

Короче, когда Демка был маленький часто приходилось ему сочинять и рассказывать сказки: мы с Наташкой от этого, объективно уставали, но, кажется, это все-таки была полезная когнитивная нагрузка.
То есть, мозгу однозначно полезно

Серьёзные данные позволяют считать сочинение историй содержательной когнитивной деятельностью с вероятными небольшими преимуществами для креативного и нарративного мышления. Доказательств большого общего эффекта на интеллект или мозг пока нет.


См.ресерч

И вот вся эта современная движуха все больше забирает у нас что-то полезное и нужное для развития.

И за себя я не особо переживаю, а вот с детворой сложнее.
Хочется сделать так, чтобы они выросли способными и сообразительными.

А че, как вы тут думаете? Нейронки приведут к тому, что следующее поколение

😱 - будет слабее нас в плане общих знаний
❤️ - станет сильнее и лучше и отлично адаптируется, как это было с нами (телефоны, интернет, соц сети)
💊 - бегите, глупцы, скайнет уже вышел на тропу!
💊41😱3524👍1👏1
#пятничное

Кажется, по такому принципу живет Наташка🤣

💯 - если ты согласнА, что так и должно быть
🦄 - если ты согласЕН, что так и должно быть
❤️ - чисто поддержать
76💯54🦄17🥱5👏2
Тут у нас дождь, поэтому мы чем занимаемся?
Прааавильно!
Катаемся на велосипедах, ходим в поход и в спортзал 💪

P.S. Не понимаю, почему только мы? Где все остальные????😁
19👍6😁6😍3
Аааааааааа🤣
🤣104💯20😁97🔥2👍1👏1
2 года наблюдений, 22 тыс.инженеров и больше 4 тыс.команд

Интересно наблюдать, что то, о чем я говорю давно начинает постепенно проявляться в числах.

Люди ленивы: мы слишком легко перекидываем работу на других по цепочке.

То есть, если нейронка способна подготовить ответ, то мы поленимся его улучшать и просто закинем дальше по цепочке.

Это в свою очередь начинает создавать нагрузку на тех, кто более ответственный - типо синьорных ребят, которые начинают испытывать доп нагрузку.

Помните, я уже писал, что основные бенифицары от AI в разработке - не синьоры, а как раз те, кто больше заинтересован как можно скорее запилить фичу (шипперы они называются в исследовании).

А синьоры получают гораздо больше нагрузки.

Чем же ответят синьоры?

Через год увидим в исследованиях, что большая часть кода попадает в прод без ревью человеком.

У AI есть скрытая подписка. Называется «сеньор», так бы я сформулировал основную мысль статьи (уверен, через год будет как я предполагаю выше)

Короче, соблазн понятный: купили нейронку, стали быстрее писать код, пошли считать, сколько разработчиков можно сократить.

Вот сама статья от ребят из Faros.

Получилось любопытно.

Задач действительно закрывают больше.

На разработчика приходится на 33,7% больше завершённых задач и на 16,2% больше влитых PR.

Красиво. На слайд для руководства уже можно тащить.

А дальше начинается ревью.

Медианное время нахождения PR на этапе ревью выросло в 5,4 раза.

Авторы называют происходящее «налогом на сеньоров»: код выглядит убедительно, а поиск ошибок в логике требует глубокого понимания системы.

До прода тоже доехало.

Багов на разработчика стало на 54% больше. Инцидентов в месяц на 57,9% больше.

Дежурная смена тоже почувствовала вашу AI-трансформацию 🫡

Code churn вырос на 861%: здесь это отношение удалённых строк к добавленным за квартал.

Причиной могут быть и переделки, и полезная расчистка старого кода. Всю эту цифру записывать в «нейронка наговнокодила» было бы натяжкой.
🔥1976❤‍🔥2👌1🫡1
Плохой менеджер Артём Арюткин
2 года наблюдений, 22 тыс.инженеров и больше 4 тыс.команд Интересно наблюдать, что то, о чем я говорю давно начинает постепенно проявляться в числах. Люди ленивы: мы слишком легко перекидываем работу на других по цепочке. То есть, если нейронка способна…
Разверну мысль про то, что люди ленивы.

Типичная проблема, с которой сталкиваются люди - некомпетентные менеджеры.
Как мы понимаем, что менеджер некомпетентен (пример ниже не относится к топам, он относится к мидл и аппер-мидл менеджерам): они не могут сформулировать образ результата. Точнее могут, но им лень потратить время на это и они перекидывают задачу «наподумать» дальше по цепочке.

Как это понять?
Они закидывают в чат пару тезисов и ждут, что все разберутся сами.

Почему они так себя ведут?
Они копируют модель поведения менеджеров выше. Но прикол в том, что если для топа это оправдано, то вот для мидл- менеджеров это никак не оправдать.

А что происходит дальше?
Дальше исполнитель может выполнить задачу недостаточно качественно (еще бы, как ты ее качественно выполнишь, если критериев нет), а менеджер может все свалить на некомпетентность этого исполнителя.

И весь прикол в том, что теперь все вокруг стали менеджерами (ну в смысле, юзают агентов, как сотрудников).
Но если ты сваливаешь задачу на агента, то ответ «ну это Вася облажался» не принимается и вопросы возникают уже к тебе!

А ты компетентный менеджер?

🦄 - самый клмпетентский из всех компетентных
❤️ - ну средненько
💊 - пхах, всегда перекидываю задачу дальше по цепочке
🦄4538💊11👍3💯2😁1
Плохой менеджер Артём Арюткин
Тут у нас дождь, поэтому мы чем занимаемся? Прааавильно! Катаемся на велосипедах, ходим в поход и в спортзал 💪 P.S. Не понимаю, почему только мы? Где все остальные????😁
2 причины, почему я не просыхаю на этом острове! 🏝️

1. Дожди!
2. Банка колы - 600 рублей, а значит приходится изо всех сил дегустировать вино! 🤣
🤣36🍾10😁91😭1
Если вы еще не поняли, что я все еще в отпуске, то ловите мем
🤣58😁19❤‍🔥12🔥5🖕1