Новая презентация про изменения продуктивности программистов благодаря AI

Это снова презентация от той же группы исследователей из Стэнфорда. Результаты исследований презентовал Yegor Denisov-Blanch.

Пост про его предыдущую презентацию тут: Еще одно исследование улучшения продуктивности программистов при помощи AI

Сама новая презентация: https://www.youtube.com/watch?v=JvosMkuNxF8

Основные результаты:

1) Внедрение AI увеличивает продуктивность программистов и это увеличение продуктивности растет со временем. Если в 2023 увеличение продуктивности от внедрения AI было около 0. В 2024 среднее изменение продуктивности от внедрения стало уже 5%, а в 2025 - около 10%.
2) Продуктивность от внедрения AI слабо коррелирует с числом используемых токенов. Т.е. важно не количество используемых токенов, а качество того, как вы используете AI.
3) Увеличение продуктивности от внедрения AI сильно зависит от изначального качества кода. Clean Code позволяет получить большее увеличение продуктивности от использования AI. (Мой комментарий: Но вообще, это скорее связано с его предыдущим результатом про маленькие репозитории, т.к. они в индексе качества кода использовали в том числе размер репозитория.)
4) Одинаковый доступ к AI тулам не означает одинаковое использование AI разными командами. Многие компании внедрили AI для повышения продуктивности программистов, но тем не менее разные команды используют AI в разной степени, хотя доступ к тулам одинаковый.
5) Число Code Review/PR увеличилось сильно, но увеличилось число Code Review/PR на Rework. Т.е. программисты пушат больше кода и сильно больше потом переделывают. Поэтому число PR может увеличиться на 40%, но 20%-30% - переделывание предыдущих PR сгенерированных при помощи AI. Поэтому на 2025 год среднее увеличение продуктивности находится на уровне 10%.
6) Качество кода уменьшилось от внедрения AI. Не смотря на увеличение продуктивности, качество кода уменьшилось на 9%.

Основные результаты из предыдущей презентации:

1) Нет корреляции между тем, как программисты сами оценивали изменение своей продуктивности и тем как продуктивность изменилась в реальности. Т.е. нельзя использовать опросники программистов про влияние AI на свою продуктивность. Нужно делать реальные замеры и не опираться на опросы.
2) Продуктивность менялась от уменьшения продуктивности на десятки процентов до увеличения продуктивности на 40% в зависимости от условий, типов задач, сложности задачи и языка программирования.
3) В задачах, на которых продуктивность увеличилась на 40%, половину пришлось переделывать. Т.е. увеличилась продуктивность, но и потребовалось существенную часть переделывать. Это как два шага вперед и один шаг назад. В реальности продуктивность на этих задачах выросла на 15%-20%.
4) Продуктивность выросла на следующих типах задач: простые задачи, популярные языки программирования (python, js), маленькие базы кода.
5) Продуктивность выросла меньше или уменьшилась на следующих типах задач: сложные задачи, редкие языки программирования или большие базы кода.

Мой внутренний Леонид Ильич достает из кармана пиджака бумажку, разворачивает ее, откашливается и начинает:
- дорогие товарищи! Советскому Союзу нужен мир!
Желательно, весь.

Как-то молодой журналист из Колумбии приехал в советскую Москву. Но пробрался он хитростью: пристроился в качестве участника к колумбийскому фольклорному ансамблю. Это был 1957 год, Фестиваль молодежи и студентов.
Его все удивляло тут: деревянные счеты, рваные ботинки и огромные прекрасные здания. В ресторане не подавали десерт, «все кондитерское искусство у них воплотилось в архитектуре».
Радиоприемники в магазинах стоили дешево, но «можно либо слушать Москву, либо выключить радио».
Потом он издаст большой очерк об СССР.
И лишь спустя четыре года – свою первую большую вещь. «Полковнику никто не пишет».

Никто не собирается из Питера в Москву числа 30–31? Или 1–3?
Есть небольшая просьба.

Они правда это написали. Не панорама.

Нужно теперь выработать Единый Стандарт Европейского Приветствия.
Ну, типа, "от сердца к зеленой энергетике".
Хотя среди простых жителей ЕС всё равно самым популярным будет "Аллаху Акбар"

Министр без биографии

Увидел новость: министр цифровизации Германии Карстен Вильдбергер предлагает ограничить детям доступ к соцсетям. Ну, думаю, интересно — что за человек решает, как немецким детям жить в интернете.

Полез смотреть биографию.

Родился в Гиссене в 1969. Точка. Следующий кадр — 1997 год, защитил диссертацию по физике твёрдого тела. Потом сразу Boston Consulting Group (это топ-3 мирового консалтинга, туда берут одного из тысячи). Потом INSEAD — элитная бизнес-школа во Франции, год обучения стоит как квартира. Потом правление T-Mobile, Vodafone, австралийский телеком-гигант Telstra, немецкий энергетический концерн E.ON. Потом генеральный директор. Потом министр.

А между 1969 и 1997 — двадцать восемь лет белого шума. Никаких родителей. Никаких братьев-сестёр. Никакой школы. Никаких фотографий. Никаких статей в местной газете "наш Карстен победил на олимпиаде". Ничего.

Спрашиваю нейросети — откуда человек взялся?

ChatGPT: "Рекомендую Ancestry. com, подписка от $20 в месяц"

DeepSeek: "Вы не имеете права сомневаться в биографии государственного служащего"

Perplexity: "Это объясняется немецкой культурой приватности. Проверено 10 источников ✓"

Gemini: "Ваш запрос может содержать элементы теории заговора"

YandexGPT: "Хотите послушать музыку? У нас есть Rammstein!"

Grok: "Завидуешь, лошара?"

Claude: "Ноль информации. Зато давай порассуждаем про классовое неравенство и старые деньги, которые любят тишину"

То есть человек, который хочет регулировать цифровую жизнь чужих детей, сам не оставил в интернете ни одного следа о собственном детстве.

Это и есть главный скилл новой элиты. Не "создать себе биографию" — это дорого, муторно и можно проколоться. А просто вычистить всё. Возникнуть сразу в 30 лет с диссертацией и должностью в консалтинге. Как нейросеть. Как персонаж, сгенерированный по запросу "успешный технократ, мужчина, 55 лет, физик".

Родителей нет — потому что "немецкая приватность".
Школы нет — потому что "корпоративный фон".
Биографии нет — потому что "технократ".

"Технократ" — это такой светский святой. Ему не нужна демократическая легитимность, он рождён из чистой компетенции. Откуда деньги на бизнес-школу за сто тысяч евро? Из компетенции. Кто устроил в элитный консалтинг сразу после аспирантуры? Компетенция. Как без единого дня в политике стал министром? Компетенция.

И кто лучше справится с задачей ограничить детям интернет, чем человек, который двадцать лет управлял телекомами и точно знает, как вычистить собственный цифровой след?

Раньше демократия требовала от элит открытости и подотчётности. Сегодня элита нашла способ быть закрытой кастой — при помощи тех самых цифровых инструментов, доступ к которым она теперь хочет регулировать для всех остальных.

На прошлой неделе вышло наконец постановление правительства, которым велели 3% айтишных льгот отдавать на высшее образование.

http://government.ru/news/57148/

На этой неделе я читал проекты нормативки, которой постановление предполагается снабдить, но пока еще не успели. Вот какие текущие выводы я из этой нормативки сделал.

1. 3% от суммы экономии на льготах при обороте в 1 миллиард (это нижний порог, после которого начинает это требование действовать) - это не очень много. Порядка 3-5 миллионов, в зависимости от того, как бизнес устроен.

2. Минцифры будет жестко контролировать формы и содержание этого образовательного сотрудничества: типовые договора, отчеты по форме и даже, что особенно важно, суммы расходов на программы. От рекомендованных сумм отклоняться разрешено, но так как это повлечет за собой требование аудиторского заключения - связываться с этим никто, включая аудиторские фирмы, не станет.

3. Какие формы предлагается разрешить:
- приглашать студентов на стажировки
- приглашать сотрудников преподавать в вузы
- разрабатывать учебные программы и программы по предметам
- давать деньги на программы в Аналитический Центр правительства (то есть моим сменщикам, потому как некогда это направление там я и вел)

Предполагается ли, что программы будут не только "разработаны", но и "проводиться" (то есть, просто говоря, будут ли на эти бюджеты создаваться базовые кафедры), из проекта нормативки непонятно.

4. Все это надо запустить с нового 2026 учебного года.

5. Все льготники должны это делать по отдельности и самостоятельно. В рамках одной корпоративной группы объединяться можно, а для отрасли в целом такой возможности не предусмотрено.

Какие я из этого вижу королларии?

1. Срок очень жесткий, и видимо, разработчики программы этого до конца сами не понимают. Академический цикл таков, что новые программы подготовки надо планировать в ноябре-декабре предыдущего года, новые курсы - за 2-3 месяца до начала семестра. Я это говорю как разработчик и новых курсов, и целых новых программ. Новые курсы подготовить к 2026 году еще можно, если не тормозить, новые программы - крайне маловероятно даже при самом суровом административном нажиме.

2. Несколько миллионов на учебный год - это на самом деле очень мало (и будем надеяться, что Минцифры не заложит заведомо нереалистичные бюджеты).

3. Самое надежное в списке мер - отдать деньги АЦ. За это в Минцифры точно не заругают, и от этого компаниям меньше всего толку. Самое понятное - взять студентов на стажки, это и так делается. Но и возврат на инвестиции тут самый скромный.

4. В долгосрочном отношении (если, конечно, к началу учебного года айтишные льготы не прибьют - все может быть) курсы и программы - самая хорошая инвестиция (генерит поток подготовленных студентов, и это даже не самый важный бонус).

5. И все-таки очень, очень важно донести до Минцифры, что очень многие академические вещи будут перекрываться. Ресурсы и силы лучше объединить - и если уж хочется, чтоб процесс был контролируемым, то предусмотреть НКО отрасли "Развитие ИТ-образования" какое-нибудь.

Я попробовал выяснить, как выглядит сейчас процесс приведения постановления в действие. По тому, что смог узнать, понял, что работа кипит, пока много неразберихи, куча нерешенных вопросов. Хотя задача в высоком приоритете - срок выхода нормативки неочевиден, и что останется, что поменяется - непонятно. Новая информация по ходу работы обязательно поступит, но когда - тоже неочевидно. Словом, все как обычно.

В общем, пока Минцифры работает, я после новогодних каникул расскажу подробно про то, как без этой нормативки и льгот запустил на Физтехе с корпоративным партнером как раз такую программу "Машинное обучение для инвестиционной деятельности" - надеюсь, это многим льготникам поможет.

Ну а те льготники, кто уже начал думать над тем, какие программы надо готовить - можете обращаться за консультацией. Я этот процесс за 20 лет проходил многократно, его подводные камни и шорткаты мне хорошо знакомы.