Однажды ночью мы получили тревожный звонок: «Сайт живой, но половина запросов уходит в таймаут». На первый взгляд всё выглядело как обычная просадка под нагрузкой. Логи — пустые. CPU — в норме. Память — с запасом. А вот TLS-рукопожатия внезапно начали сыпаться 😬
Проблема оказалась банальной и неприятной: на одном из балансировщиков закончились эпhemeral-порты, а мониторинг смотрел только на нагрузку и место на диске. Внешне сервер был «здоров», но новые соединения уже не открывались стабильно. Пользователи видели ошибки, мы — красивую зелёную панель.
Вывод простой: инфраструктура ломается не там, где вы обычно ищете. Помимо CPU и RAM, обязательно следите за conntrack, портами, лимитами файловых дескрипторов и состоянием TLS-пула. Иначе одна маленькая недосмотренная метрика превращается в большой и очень дорогой провал 🔧
Проблема оказалась банальной и неприятной: на одном из балансировщиков закончились эпhemeral-порты, а мониторинг смотрел только на нагрузку и место на диске. Внешне сервер был «здоров», но новые соединения уже не открывались стабильно. Пользователи видели ошибки, мы — красивую зелёную панель.
Вывод простой: инфраструктура ломается не там, где вы обычно ищете. Помимо CPU и RAM, обязательно следите за conntrack, портами, лимитами файловых дескрипторов и состоянием TLS-пула. Иначе одна маленькая недосмотренная метрика превращается в большой и очень дорогой провал 🔧
Есть простое правило из практики: если инфраструктура «держится на одном человеке, одной ВМ и одном бэкапе», авария уже не вопрос «если», а вопрос «когда».
В хостинге и на серверах чаще всего ломается не железо, а допущения: что диск не заполнится, сертификат сам продлится, апдейт пройдёт без сюрпризов, а резервная копия точно восстановится. Поэтому полезно проверять не только аптайм, но и сценарий возврата: как быстро поднимется сервис, где лежат ключи, кто имеет доступ, что будет при сбое DNS или панели.
Хорошая инфраструктура — это не та, где ничего не падает. Это та, где падение не превращается в пожар 🔧
В хостинге и на серверах чаще всего ломается не железо, а допущения: что диск не заполнится, сертификат сам продлится, апдейт пройдёт без сюрпризов, а резервная копия точно восстановится. Поэтому полезно проверять не только аптайм, но и сценарий возврата: как быстро поднимется сервис, где лежат ключи, кто имеет доступ, что будет при сбое DNS или панели.
Хорошая инфраструктура — это не та, где ничего не падает. Это та, где падение не превращается в пожар 🔧
Forwarded from AffPapa! Клуб спящих бизнесменов! Потрачено!
This media is not supported in your browser
VIEW IN TELEGRAM
Совсем скоро запуск ШЕСТОГО проекта на RU GEO от создателей APEX, EVA, KUSH, BANDA и LEEBET!
Please open Telegram to view this post
VIEW IN TELEGRAM
Forwarded from AffPapa! Клуб спящих бизнесменов! Потрачено!
Там Бласк придумал сканировать/скриншотить сайты что бы мониторить размещения, по сути они нашли все сайты аффилиатов, каждый день скриншотят их и фиксируют, что бы контролировать размещения слота
ЧТо бы избежать хуйни когда менеджер раз в квартал присылает тебе один скрин "всё супер, лого стоит" — а по факту оно там провисело два дня из тридцати, и ты про это узнаёшь только когда партнёр уже слился
Пока выкатывают вроде как только Бразилию, но на очереди и другие ГЕО! Плюсы очевидны:
• смотреть на конкурентов (в Бразилии мы нашли 315 сайтов)
• смотреть, кто размещается у конкурентов
• смотреть обьем трафика
Тоже самое вайб кодить в NeBlask я не планирую, может чуть попозже, когда они все ГЕО выкатят и я смогу просто собрать все сайты котоыре они мониторят, короче если это кому надо, идем в Blask! А NeBlask подтянется позже!
P.S. На скрине - размещение бренда Bet da Sorte
ЧТо бы избежать хуйни когда менеджер раз в квартал присылает тебе один скрин "всё супер, лого стоит" — а по факту оно там провисело два дня из тридцати, и ты про это узнаёшь только когда партнёр уже слился
Пока выкатывают вроде как только Бразилию, но на очереди и другие ГЕО! Плюсы очевидны:
• смотреть на конкурентов (в Бразилии мы нашли 315 сайтов)
• смотреть, кто размещается у конкурентов
• смотреть обьем трафика
Тоже самое вайб кодить в NeBlask я не планирую, может чуть попозже, когда они все ГЕО выкатят и я смогу просто собрать все сайты котоыре они мониторят, короче если это кому надо, идем в Blask! А NeBlask подтянется позже!
P.S. На скрине - размещение бренда Bet da Sorte
Forwarded from AffPapa! Клуб спящих бизнесменов! Потрачено!
This media is not supported in your browser
VIEW IN TELEGRAM
Совсем скоро запуск ШЕСТОГО проекта на RU GEO от создателей APEX, EVA, KUSH, BANDA и LEEBET!
Please open Telegram to view this post
VIEW IN TELEGRAM