Как я стал SRE. Часть 3 из 3
Мы работали дежурными и понимали, что нам не хватает данных для мониторинга. Сначала я сделал несколько досок по метрикам трейсов, стали видны просадки по заказам и другие показатели. Подкрутили сюда алерты по аномалиям.
Организовал полноценное дежурство на проде, обучал других разрабов дежурству, писал им доку и инструкции. Оповещения через OpsGenie, тренировки дежурной смены с колесом нефортуны, реагирование на инциденты, их разбор (постмортемы). И, конечно, давал руководству в чатике об этом сводки. Классно все вертелось и строилось.
В итоге, оказалось, многое из того, что я делал уже было в книге Google SRE.
Сам момент перехода случился внезапно: после 2 года работы я ушел в отпуск разработчиком, а вернулся из него уже SRE. Так решили ребята с которыми я работал. Мне было приятно переключиться полностью на решение этих проблем. С тех пор я SRE. Строю и поддерживаю надежные и устойчивые системы.
🧙♂️Вот так.
А как вы пришли к своей работе? Что запомнилось больше всего?
Мы работали дежурными и понимали, что нам не хватает данных для мониторинга. Сначала я сделал несколько досок по метрикам трейсов, стали видны просадки по заказам и другие показатели. Подкрутили сюда алерты по аномалиям.
Организовал полноценное дежурство на проде, обучал других разрабов дежурству, писал им доку и инструкции. Оповещения через OpsGenie, тренировки дежурной смены с колесом нефортуны, реагирование на инциденты, их разбор (постмортемы). И, конечно, давал руководству в чатике об этом сводки. Классно все вертелось и строилось.
В итоге, оказалось, многое из того, что я делал уже было в книге Google SRE.
Сам момент перехода случился внезапно: после 2 года работы я ушел в отпуск разработчиком, а вернулся из него уже SRE. Так решили ребята с которыми я работал. Мне было приятно переключиться полностью на решение этих проблем. С тех пор я SRE. Строю и поддерживаю надежные и устойчивые системы.
🧙♂️Вот так.
А как вы пришли к своей работе? Что запомнилось больше всего?
❤6
🎯 Встречаемся на HighLoad++ в Сколково 6-7 ноября 2025!
🥸 В этот раз я намерен только лицезреть и ухослушать доклады, вопрошать к докладствующим.
🤗 Буду рад повидаться вживую с каждым, независимо от того посетитель ты или докладчик.
✒️ Хотя если ты докладчик - скидывай в коммент еще и ссылку на тезисы, так рискуешь втянуть себе слушателей, которые тебя поддержат. Да и нам поможешь составить маршрут по докладам.
🔥 Отмечайтесь реакциями, кто будет на конференции вживую - посчитаемся и встретимся!
#встречи #оффлайн #вживую #москва
🥸 В этот раз я намерен только лицезреть и ухослушать доклады, вопрошать к докладствующим.
🤗 Буду рад повидаться вживую с каждым, независимо от того посетитель ты или докладчик.
✒️ Хотя если ты докладчик - скидывай в коммент еще и ссылку на тезисы, так рискуешь втянуть себе слушателей, которые тебя поддержат. Да и нам поможешь составить маршрут по докладам.
🔥 Отмечайтесь реакциями, кто будет на конференции вживую - посчитаемся и встретимся!
#встречи #оффлайн #вживую #москва
🔥4😭1
Уточняю, буду на HighLoad один день 6 ноября 2025.
Кто будет в этот день, просьба коммент 👇 написать если будете в тот же день. Увидимся 🤠
Кто будет в этот день, просьба коммент 👇 написать если будете в тот же день. Увидимся 🤠
Кстати в этом году HighLoad в Сколково не в привычной "шайбе", а в внимание! В прямоугольном помещении!!! 😱
Что думаю несказанно порадует посетителей ))
И оказалось это совсем не рядом. Я уже по привычке собирался ехать в "шайбу". Хорошо сегодня посмотрел программу. Смотрю там названия залов чуднЫе — не те. "Вот те раз" подумал Мюллер, "вот те два" - подумал Штирлиц и сбросил 2 кирпич. Может и город не тот 🤣 Оказалось тот.
Внимательнее товарищи.
#highload #карта #москва
Что думаю несказанно порадует посетителей ))
И оказалось это совсем не рядом. Я уже по привычке собирался ехать в "шайбу". Хорошо сегодня посмотрел программу. Смотрю там названия залов чуднЫе — не те. "Вот те раз" подумал Мюллер, "вот те два" - подумал Штирлиц и сбросил 2 кирпич. Может и город не тот 🤣 Оказалось тот.
Внимательнее товарищи.
#highload #карта #москва
Объясняю сыну про
🍬 SLI и SLO на примере конфет
Иногда сын спрашивает, чем я занимаюсь и приходится придумывать как доступно объяснить.
— Пап, а что за "сло" ты там делаешь?
— Хмм... Представь, фабрика делает конфеты — каждая в своём фантике. Ты купил килограмм, набралось штук 50.
Решил принести в класс — раздать на все 30 человек.
Раздал а в одной оказался воздух. «Ну, бывает», — думаешь, там еще 20 в пакете,, поменял на другую. Класс доволен. Ты герой.
А теперь представь: 30 из 50 — дутые.
Ты раздаёшь — и у половины в руках ничего.
Тишина. Такое себе — стыдно. Думаешь "что так сложно конфеты было завернуть?".
Вот чтоб так не было, фабрика проверяет:
SLI — это счётчик:
*«Сколько нормальных конфет мы сделали за сегодня?»*
Например: 992 настоящих + 8 дутых → SLI = 992/1000.
И ставит себе же условие —
SLO: минимум 995 из 1000 фантиков в час будут с конфетой, иначе надо срочно чинить:
«Стоп! Мы не просто теряем деньги — мы теряем доверие!». Значит можно ошибаться до 5 раз в час.
В IT то же самое:
* Пользователь нажимает кнопку → ждёт результат.
* Получил — как конфета в фантике.
* Получил ошибку — как дутый фантик.
Сын:
> **«А как мы поймём — не кончится ли наше “можно ошибаться” ещё до конца дня?..
> И что, если оно кончается не по чуть-чуть, а сразу — Бах и 99 из 100 пустые уже?
А это уже другая история, сынок.
#SLO #объясняем #sre
🍬 SLI и SLO на примере конфет
Иногда сын спрашивает, чем я занимаюсь и приходится придумывать как доступно объяснить.
— Пап, а что за "сло" ты там делаешь?
— Хмм... Представь, фабрика делает конфеты — каждая в своём фантике. Ты купил килограмм, набралось штук 50.
Решил принести в класс — раздать на все 30 человек.
Раздал а в одной оказался воздух. «Ну, бывает», — думаешь, там еще 20 в пакете,, поменял на другую. Класс доволен. Ты герой.
А теперь представь: 30 из 50 — дутые.
Ты раздаёшь — и у половины в руках ничего.
Тишина. Такое себе — стыдно. Думаешь "что так сложно конфеты было завернуть?".
Вот чтоб так не было, фабрика проверяет:
SLI — это счётчик:
*«Сколько нормальных конфет мы сделали за сегодня?»*
Например: 992 настоящих + 8 дутых → SLI = 992/1000.
И ставит себе же условие —
SLO: минимум 995 из 1000 фантиков в час будут с конфетой, иначе надо срочно чинить:
«Стоп! Мы не просто теряем деньги — мы теряем доверие!». Значит можно ошибаться до 5 раз в час.
В IT то же самое:
* Пользователь нажимает кнопку → ждёт результат.
* Получил — как конфета в фантике.
* Получил ошибку — как дутый фантик.
Сын:
> **«А как мы поймём — не кончится ли наше “можно ошибаться” ещё до конца дня?..
> И что, если оно кончается не по чуть-чуть, а сразу — Бах и 99 из 100 пустые уже?
А это уже другая история, сынок.
#SLO #объясняем #sre
👍4
Кстати к прошлому посту по заводу конфет и SLO.
Сын тут принес недавно вопрос-загадку:
#загадка #оптимизация #лень
Сын тут принес недавно вопрос-загадку:
— Кстати, пап, на том заводе конфет хотели сложных роботов ставить за мильоны для выявления "пустых фантиков", а рабочим было лень руками проверять пока роботов поставят и они это решили за 5т.р. Знаешь как?🥸 Уважаемые знатоки, какие варианты у вас, если не гуглить и не Гпятить?
#загадка #оптимизация #лень
👍2
HighLoad 2025. Выступал мой коллега из Ви.Tech в главном зале "Казан" с докладом про ML в кешировании. Людей был почти полный зал. Впервые с ним свиделись вживую.
Также повидал многих друзей и знакомых, обменялись опытом и новостями. Был рад всех видеть.
Площадка интересная в этот раз - много прозрачных залов.
В конце дня еще рядом со стендом MTS был мини-концерт кавер группы - прикольно.
Во время афтерпати кстати еще шли доклады - я записал себе из одного идею про "стратегический час". Если хотите расскажу позже — только скажите. Я же у себя практикую "час размышления".
Также повидал многих друзей и знакомых, обменялись опытом и новостями. Был рад всех видеть.
Площадка интересная в этот раз - много прозрачных залов.
В конце дня еще рядом со стендом MTS был мини-концерт кавер группы - прикольно.
Во время афтерпати кстати еще шли доклады - я записал себе из одного идею про "стратегический час". Если хотите расскажу позже — только скажите. Я же у себя практикую "час размышления".
Мне понравились загадки-ребусы на #HighLoad от Mir.Platform.
Первый мне дался легко, второй сложнее, третий я не отгадал.
🧙♂️Потому предлагаю вместе отгадать все три. Жду ваши варианты.
Первый мне дался легко, второй сложнее, третий я не отгадал.
🧙♂️Потому предлагаю вместе отгадать все три. Жду ваши варианты.
🔥1
В продолжение темы загадок и ребусов.
📜 Древние свитки - кодирование.
Придумал сыну загадку голоаоломку-шифр. Бьётся над разгадкой несколько дней, вертит и так и сяк, просвечивает, читает с зеркалом. Хотя мне как загадавшему это не кажется сложным 😅
Я когда-то в школе увидел интересную головоломку - тетраэдер (4 Г образные детали, 3 шара в ряд, последний 4-й перпендикулярно 3-му) , сделал из частей по картинке и пытался собрать. 2 дня размышлений, сборка и разборка аналогичных - собрал.
🧙♂️Это я к чему... а то что также думают и заблуждаются люди после разбора инцидента, мол, а чего там сложного-то, надо было сделать так-то во время устранения, все ведь понятно. Понятно, когда разгадал и не стеснен временем.
🥸 Уважаемые знатоки, а теперь вопрос: что написано в послании?
#мышление #инцидент
📜 Древние свитки - кодирование.
Придумал сыну загадку голоаоломку-шифр. Бьётся над разгадкой несколько дней, вертит и так и сяк, просвечивает, читает с зеркалом. Хотя мне как загадавшему это не кажется сложным 😅
Я когда-то в школе увидел интересную головоломку - тетраэдер (4 Г образные детали, 3 шара в ряд, последний 4-й перпендикулярно 3-му) , сделал из частей по картинке и пытался собрать. 2 дня размышлений, сборка и разборка аналогичных - собрал.
🧙♂️Это я к чему... а то что также думают и заблуждаются люди после разбора инцидента, мол, а чего там сложного-то, надо было сделать так-то во время устранения, все ведь понятно. Понятно, когда разгадал и не стеснен временем.
🥸 Уважаемые знатоки, а теперь вопрос: что написано в послании?
#мышление #инцидент
🤔 Знаете какая моя техническая статья сейчас самая популярная на Хабр?
Не техническая. А про нашу пятую точку и все другие точки над ней.
Это статья 2012 года про правильный стул 🪑для ежедневной работы за компьютером https://habr.com/ru/articles/150875/
На данный момент 871 тыс. просмотров.
Я вот думаю, а как так вышло? Правильное время? Правильная тема? А может просто потому что "болело" и по прежнему болит у многих.
🙋 Что скажите устарел ли ее материал? Или все еще актуально?
#статья #здоровье #заметки
Не техническая. А про нашу пятую точку и все другие точки над ней.
Это статья 2012 года про правильный стул 🪑для ежедневной работы за компьютером https://habr.com/ru/articles/150875/
На данный момент 871 тыс. просмотров.
Я вот думаю, а как так вышло? Правильное время? Правильная тема? А может просто потому что "болело" и по прежнему болит у многих.
🙋 Что скажите устарел ли ее материал? Или все еще актуально?
#статья #здоровье #заметки
Хабр
Правильный стул для ежедневной работы за компьютером
Вопрос о столах поднимался несколько раз ( раз , два ). Однако, на чем же мы сидим перед столом? Стул — не менее важная часть рабочего места любого человека, много времени работающего за компьютером в...
🔥2