Data Дзен с Олегом Дмитриевым
1.64K subscribers
232 photos
34 videos
1 file
65 links
Закулисье IT: как на самом деле работают аналитики и что скрывают дашборды!

Олег Дмитриев - заведую аналитикой, 5+ лет в IT, пишу о радостях, боли и лайфхаках работы с данными.

BI, аналитика, лайфстайл, саморазвитие !

Сотрудничество :@o_dmitriev1
Download Telegram
Пятница пришла, давайте похвалим себя за труды 😎

Обсуждали год → собрали за неделю. Проект по медицине региона, который месяцами ходил по кабинетам, наконец пошёл в разработку 💪

За одну неделю с командой упаковали всё, что растягивали на согласования почти 12 месяцев, и отдали в работу. Ирония в том что разработка займёт меньше времени, чем её обсуждение 😂

Каждый кусочек проекта это попытка упростить жизнь заказчику. Меньше ручного труда, головной боли. Ну и вишенкой на торте: экономия бюджета в перспективе.

22 месяца на закупку, 2 на работу

Gartner считает, что средний цикл государственных IT-закупок — около 22 месяцев. В коммерции 6–7. Разница в три с лишним раза. Свежесть этого исследования неизвестна, но цифры +/- совпадают с реалиями.

ТЗ в госсекторе часто пишут не ради продукта, а ради ГОСТов. Документ на 80–100 страниц. 10% про функционал. Остальное: стандарты, методички, регламенты. А ещё обязательные паузы, заседания комиссий, окна для жалоб, перезапуски процедур. Вот и набегают те самые 22 месяца.

Когда контракт наконец подписан, на реализацию остаётся 2–3 месяца. Отчётность может занимать до 30% объёма работ, потому что документы проходят через 3–4 уровня контроля.

Хотели как лучше, а получилось ...
🤦‍♂️

Система задумана как защита от недобросовестных исполнителей. На деле выкручивает руки тем, кто хочет сделать нормальный продукт.

А вот проблемные компании за счёт сильных юристов и умения работать с формулировками ТЗ нередко отбиваются от контролирующих органов.
Видел я такую конторку. У них в штате даже не было разработчиков, и по итогу при ревью кода выяснилось что каждый раз код писали разные люди. Видимо фрилансеры 😁
Вот такая вот «защита». Коли в компании штат юристов больше, чем специалистов - это первый звоночек.

ГОСТы на месте, а качество.. нуу как повезёт 🤷‍♀️

Государство тратит годы, чтобы подробно описать, как потратить деньги. А потом даёт команде 2–3 месяца, чтобы всё реализовать. Документация ничего не говорит о качестве продукта, зато каждый ГОСТ на месте.

Но мы пробиваемся и делаем то, что нужно людям. И эта неделя, маленькая победа, за которую себя точно можно похвалить 🔥

А теперь ваш черёд. Какие подвиги совершили на неделе?
👇

@data_dzen🙂
Please open Telegram to view this post
VIEW IN TELEGRAM
104433🤯18🎉86👏6👨‍💻5
Убираем рутину из расписания через автоматизацию Excel 😎

Ну вот и подходит наш путь по Excel к завершению. На этой неделе закроем его большой статьёй и шпаргалкой по тренировке.

А пока обсудим золотую жилу для ленивого 🤔

Его анонсировали в 1993-м. А он до сих пор кормит аналитиков в половине корпораций РФ. Речь про макросы.

Макрос - сценарий на VBA, который автоматизирует рутину: чистку данных, сборку отчётов, рассылку, генерацию документов. Всё локально. Без интернета.

Что умеют делать с макросами:
1️⃣ Чистят выгрузку из 1С за 8 секунд вместо 40 минут руками: пустые строки, пробелы, кривые даты, коды → нормальные названия
2️⃣ Собирают сводный отчёт из десятков региональных файлов: макрос сам обходит папки, забирает данные, клеит, считает итоги
3️⃣ Рассылают PDF через Outlook по списку адресатов - открыл, нажал, ушёл за кофе
4️⃣ Генерят сотни счетов/актов по шаблону: цикл по строкам = файл на каждого контрагента
5️⃣ Строят мини-дашборд для отдела продаж: сводная по менеджерам, топы и аутсайдеры, PDF в папку

А зачем вам это? 🤔
Оптимизируем: полдня ручной работы, человеческие ошибки, «ой, забыл Х поле».
Получаем: 2–3 минуты работы машины, предсказуемый результат каждый раз.

Почему в РФ без VBA вообще никуда

В госах, банках, ВПК, промышленности - станции физически отрезаны от интернета. Office Scripts, Power Automate, Copilot - не работают без облака от слова совсем.

VBA - единственный встроенный способ автоматизации в таких контурах. IT-отдел не нужен. Согласования доступов, лицензии на RPA? Забудьте.

Факт: Наша дорогая ФНС с 120 000 рабочих мест годами жила на макросах как основном способе убить рутину. Переход на RPA начали только в 2025-м. Так как им потребовалась работа в браузере и связка с дополнительными программами.

Где засада 🤦‍♂️

1️⃣ Жёсткие диапазоны: записал макрос под A1:F100, через месяц данных до строки 500 - код не обрабатывает новое, а ты уверен что всё ок
2️⃣ Привязка к ActiveSheet: запустил из другой книги - упал или посчитал не то
3️⃣ Нет обработки ошибок: без Option Explicit и On Error код ломается в проде на ровном месте
4️⃣ Обновление Excel/Windows: апдейт ломает старые макросы - от зависаний до ошибок на простых операциях

Лечим динамическими диапазонами, явными ссылками на листы, обработкой ошибок и документацией версий (Да да, той самой которую никто и никогда не хочет вести).
Это решает диалоги вроде:
"У нас все поломалось, срочно почини"
— "Ну чего вам надо, у меня все работает. Это у вас кривые настройки
"

Аналитик с VBA в закрытом контуре = человек у которого больше половины рабочего дня свободного время на кофе да шутки-прибаутки с коллегами. Ну или вдруг на создание гениального отчета… Главное сильно не кичиться такой автоматизацией, а то боярин нагрузит лишней работкой 😂

Есть ли у вас в практике рутинные действия, что повторяются бесконечно и их можно было закрыть макросами?
Накиньте примеров в комменты
👇
И конечно попробуйте потестить. Вдруг поможет и вам
💯

#Excel

@data_dzen 🙂
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
1045👀30👨‍💻21👏8🤩87🎉7😈3
Первый босс пройден 😎

Похоже, пора сходить с нашего пути в Excel и перестраиваться на SQL.

С начала года прошли с вами кучу тем и разобрали Excel вдоль и поперёк. По сути, получился мини‑курс, хотя я сам думал, что будет "пара-тройка постов, и всё".

Вот дорожка, чтобы не потеряться:
- Почему EXCEL = БАЗА
- Основные функции для лёгкого старта
- Как красить таблицы автоматически: форматирование
- Чем и как связывать таблицы: ВПР, XLOOKUP, ИНДЕКС+ПОИСКПОЗ
- Что такое фильтрация данных и с чем её едят
- Data Quality: как не допускать мусор в Excel
- Горячие клавиши для работы
- Устанавливаем свежий Office без VPN
- Настройки, чтобы сделать из Excel рабочую аналитическую систему
- Вершина автоматизации: макросы в Excel

Пока собирал подборку, удивился сколько всего набралось 😨

Чтобы закрыть тему и не бросать вас без бонуса, собрал большую статью с графиками и табличками - заходите почитать: [ссылка на статью].

И ещё бонус. Собрал "мини"-методичку… ну как мини, на 17 листов 😂
В ней:
- что учить в Excel и в каком порядке;
- зачем и почему именно так;
- где брать датасеты и какие упражнения делать, чтобы набить руку.

По ней можно спокойно пройтись и подтянуть Excel до уровня "готов к устройству". Файл положу в комментарии.

Добрый путь вышел. Excel даже как-то полюбился - жалко бросать. Но на выходных будем перезагружаться и стартовать в SQL.

Спасибо, что выдержали весь этот маршрут и прокачали Excel. Маршрут целиком по‑прежнему лежит на карте вот здесь .

Буду рад если вы поделитесь постом с товарищами. Информация донельзя полезная и собрана в один котел 😎

@data_dzen 🙂
Please open Telegram to view this post
VIEW IN TELEGRAM
10463022👏8👨‍💻88😈4
Здрасте-здрасте, дамы и господа 👋

Что-то я заработался кардинально. Был уверен, что сегодня уже написал пост, захожу в канал, а пятничной благодарности нету. Это вообще что такое?! Ладно, давайте исправлять. Похвалим себя за подвиги этой недели 💪

Неделя, скажу так, выдалась просто титанической. Однако есть хорошие новости.

Разметка 8 книг: почти финиш

Наконец-то (как мне кажется, я очень сильно надеюсь) я заканчиваю разметку восьми книг, связанных с мульти-персональностью модели (когда в одной модели живут разные «личности»). Это одна из вех, которую я тестирую на своей локальной домашней модели, чтобы избежать галлюцинаций на домашнем железе.

С этой разметкой, казалось бы, сам чуть кукухой не поехал 🤯
Реально, это просто ад. Столько нюансов, которые на старте невозможно учесть. Ты просто по ходу дела набиваешь шишки и стараешься не повторять ошибки.

Сегодня, надеюсь, это была финальная веха, и на следующей неделе я смогу прогнать обучение с обновлёнными фразами, где модель берёт от себя самое лучшее. А самое главное: в ней будут жить две личности, которые противоречат друг другу. Звучит как сценарий к триллеру, но нет, это ML 😁

База знаний: наконец-то запустили!

Ё-моё, три месяца мы её гоняли! Суть простая: нужно было единое место для хранения информации по проектам + коммерческая часть (договоры и прочее).

Тестировали разные гипотезы:
- Хранили в Телеге в групповом чате
- Хранили на Google Диске

Ни одна не сработала. Кто-то когда-то не занёс, кто-то не учёл. Короче, мёртвый номер. Казалось, этот квест не закончится никогда. Решили протестировать базу знаний с поиском по всему массиву. На первый взгляд выглядит неплохо
Будем обкатывать в работе. Надеюсь, не зря трудились так долго.

Почему я молодец?

Я выдержал эту историю с разметкой, уточнениями и не поехал кукухой. Наверное. И наконец-то разобрались с этой грёбаной базой знаний и запустили её в работу. Это ли не повод для радости?

Почему стоит благодарить себя 🤔

Вот даже сейчас. Сел за этот пост прямо с тяжёлым сердцем и взрывающейся головой от мысли, что я всё ещё делаю эту разметку уже вторую неделю. А потом начал писать, что я сделал, что успел, и знаете, вся эта тяжесть отлегла. Стало гораздо легче. Я понял, что сделал так много, а до финальной цели осталось совсем чуть-чуть.

К слову, проанализировал сроки. Думал, может, я дурак, почему так долго идёт разметка. Оказывается, такая разметка порой занимает месяцы, и занимаются ей целые команды. А я один. Так что две недели? Это небольшой срок. Я определённо молодец 😤

Ну ладно, заболтался. А теперь ваша очередь 👇

Расскажите, где вы молодцы? Где ваши подвиги на этой неделе?

@data_dzen 🙂
Please open Telegram to view this post
VIEW IN TELEGRAM
128🎉64👏2🤩2👨‍💻11
Дорогие девушки 😎

Поздравляю вас с праздником 🔥
Ваши идеи и энергия двигают целые команды лучше любого пинка.

Продолжайте быть такими же целеустремлёнными и с видением прекрасного.
Да, как показали наблюдения за 5 лет, дизайн у прекрасного пола получается гораздо лучше 💯

У нас ещё два дня отдыха, желаю вам провести их в кругу близких, расслабиться и развеять все внутренние тревоги.

С праздником, дорогие девушки 🩷
Please open Telegram to view this post
VIEW IN TELEGRAM
50178👏3🙏22🎉1